HPP节点内存动态共享相关问题的研究

来源 :中国科学院计算技术研究所 | 被引量 : 0次 | 上传用户:salih0997
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于性能价格比高和可扩展性好等特点,机群系统逐渐成为并行计算的主流平台.然而,机群操作系统对各种系统资源(处理器,存储器,硬盘,网络等)的管理仍然是分布式的,整个系统被视为一组独立管理计算机的集合,这种特性致使机群系统的资源不能被充分利用,造成了各种资源的浪费.研究结果表明,机群系统存在着大量可用的空闲存储器资源. 另一方面,计算机应用在规模上呈现飞速上升趋势,这不仅对计算机处理能力提出了新的要求,对计算机的存储能力同样要求也越来也高.由独立节点构成的机群系统,存在着大量可用的存储器资源,而单机的存储器资源往往是有限的,随着计算机网络速度的提高,访问磁盘的等待时间远大于访问远程节点存储器的时间,为充分利用机群系统的存储器资源,国内外很多学者在操作系统的各个层面研究出远程调页技术来整合机群系统的存储器资源以满足存储密集型应用对存储器资源的需求. 超并行处理(Hyper Parallel Processing,HPP)是中科院计算所为研制下一代百万亿次超级计算机所提出的一种多处理器体系结构,它是一个基于全局物理地址空间的分布式系统,该特性为整合系统的存储器资源以更好地支持节点上的存储密集型应用带来了新的机遇和挑战.本文在研究前人研究成果的基础上,针对HPP体系结构特点,提出一种新的内存租赁协议(Memory Rented Protocol,MRP)以实现HPP系统存储器资源共享.本文在系统分析实现内存租赁协议所需考虑的关键问题的基础上,给出了一个在HPP模拟系统上实现的基于内存租赁协议的全局共享内存系统(Global Shared MemorySystem,GSMS).本文通过测试程序较为全面地测试了GSMS在HPP模拟系统节点上的性能,并详细分析了影响GSMS性能的几个关键因素,针对这些关键因素,提出了实时内存客户端技术和动态页面预分配技术来改进这些关键因素对GSMS性能的影响,实际测试结果表明,这些技术对于提升GSMS性能作出了一定的贡献.本文通过一组存储密集型应用程序测试了GSMS带给这些应用程序的性能提升,实验结果表明,GSMS能够有效地整合HPP系统物理内存资源为存储密集型应用所用,大大减少了存储密集型应用程序的执行时间,而且其时间开销相对于应用程序性能的提升比较小,同时对GSMS空间开销的分析表明,GSMS的可扩展性非常好.
其他文献
随着处理器和存储器速度差距不断拉大,访存子系统日益成为发挥CPU性能的瓶颈.当发生cache miss时,尤其是最后一级cache miss,需要几十拍,甚至上百拍.处理器花费大量的时间在
目前,在我国电子政务发展迅速,已经积累了大量的电子政务信息资源,我国已经开始了对这些已有的电子政务信息资源的共享方式的探索。政务信息资源目录体系正是为了能够整理和组织
学位
乘性噪声图像,特别是合成孔径雷达(Synthetic Aperture Radar,SAR)图像(SAR)、声纳图像和B超图像的高效处理算法研究具有重要理论与实际意义.针对合成孔雷达SAR乘性噪声图像
结构化数据资源,特别是存储在各种类型的关系型数据库中的结构化数据,具有数据量大、质量高的特点,对科研工作的意义重大。随着高速网络技术以及计算网格技术的发展,在地理上分布
学位
网格安全问题是网格计算中的一个核心问题。安全认证机制必须使得用户,计算的过程以及该过程使用的资源都可以证明彼此的身份,是整个安全体系的基础。它可以使各个局部安全策略
学位
21世纪是互联网繁荣和盛行的时代,也是信息资源共享和快速传播的时代。首先,互联网作为时代主角,为生活和工作提供了许多便利。然而,危害信息安全的事件也频频发生,带给人们
移动对象数据库是指对移动对象的位置及其它相关信息进行表示与管理的数据库。在移动对象数据库中通常管理着大量的移动对象,这些移动对象的位置是不断变化的,如汽车、飞机、移
学位
网络主机一旦被安装上后门程序,就会受攻击者控制,威胁主机用户的隐私,甚至成为网络攻击的工具。所以尽早发现网络主机上的后门对维护网络安全是非常重要的。传统扫描工具主要致
学位
随着宽带互联网的迅速发展,网络规模不断扩大,网络结构日渐复杂。要及时了解网络的负载状况、带宽占用率,准确计量国际国内运营商间的通信流量,根据流量异常发现网络异常甚至攻击
学位
在过去的几年中,高分辨率电影扫描仪、数字图像压缩、高速数据网络和存储,以及高级数字放映技术的发展,使得数字电影(DigitaI Cinema):得到了迅猛的发展.数字电影的制作过程