基于高速网络的网格Grid计算技术.ppt

基于高速网络的网格Grid计算技术 肖 侬 国防科技大学计算机学院 Xiao_n@ 2000年 说明 本报告完成于2000年，引用了许多人的东西，没有一一指出，在此表示感谢和说明； 本报告完成于2000年，后来增加了一些国外项目的情况，但没有更多的改动，有些内容过时了，请各位注意 主要内容 一、发展趋势 二、Grid的技术 三、数据Grid技术 四、典型应用领域 五、国内外研究状况 六、我们的工作和目标 二十一世纪并行与分布计算技术发展趋势 将朝着基于高速网络的、面向大区域的高性能并行分布计算技术发展，它将突破传统并行计算技术的局限性，将高性能计算技术融入到分布式计算系统当中，提高分布式计算的性能，扩展高性能计算的适用范围，融合并行计算、分布计算、协同计算等技术。 二十一世纪并行与分布计算技术发展趋势 一种新的技术和应用将在二十一世纪诞生，它就是网格Grid计算技术。 二十一世纪并行与分布计算技术发展趋势 Grid的行为是：采用新型技术通过高速网络连接并集成地理上分布的、异构的各种高性能计算机系统、软件系统、大型数据存储系统、数字化仪器设备和控制系统等各种资源为一体，实现跨地域的、天地一体的、分布的高性能联合、协同计算，为用户提供一体化的高性能计算服务、信息处理服务和决策支持服务，发挥网络上资源的综合效能； 二十一世纪并行与分布计算技术发展趋势 将目前面向信息发布和电子商务为主要应用的INTERNET时代推向面向计算应用的INTERNET高速网络时代。Internet将变成计算设施。 国家航空飞行模拟环境 飞行安全模拟所需要技术 很显然，如此复杂的、多部件的模拟将需要汇聚横跨多个NASA中心的计算、数据、软件和应用系统、仪器设备和人力等资源来使用； 问题： 定位和协调执行各种构件，并管理结果数据 (应当是分布式的) 处理复杂的、大规模的计算 “wrapping” 各种模拟代码，以便可被其它使用使用和重用 (e.g. CORBA and NPSS) Grids – 提供资源发现、调度、 访问、应用环境构造、以及多个组织中广泛分布的计算、数据、设备等资源的共享和管理策略。 高性能并行与分布技术发展趋势原因 技术进步 高性能需求的应用增加 空闲资源的利用 计算结果的大范围共享 新的解决问题的技术和工具 计算需求无限，财力有限 技术进步（1） 微处理器的主频达到1GHZ以上，32位跃至64位； ATM和光纤技术的大力发展，大规模高速网络的建立和实施规划，例如美国NGI和Internet2计划； 高性能需求的应用增加： 国家军事、安全、能源、环境和科学研究，以及大型的商业应用都需要能够支持跨地域的高计算速度、高存储容量、高速通信和可视化虚拟等技术； 空闲资源的利用： 网络上的大量PC、工作站和服务器的利用率据统计不超过30％； 不仅仅是硬件资源需要充分利用，大量的软件资源和信息资源也应当被共享而提高利用率。 计算结果的大范围共享（1）： 大量的计算结果和信息数据需要分布存储、大范围的异地共享，这是大型科学应用要求，也是大型复杂系统合作计算的要求。 计算结果的大范围共享（2）： 重要的是能够使各类研究学者能够跨地域的相互交流，访问异地仪器设备、共享数据和计算资源，能够访问信息资源，在地域不同的条件下合作共同进行科学研究，共同解决科学问题。 新的解决问题的技术和工具： 可视化技术、虚拟虚实技术、计算机仿真模拟都需要能够更易、更快地访问各种计算资源和共享信息和数据。 二、GRID的技术 Grid的由来 Grid最初是由研究并行计算和超级计算的人提出的，面向科学计算领域，共享和充分利用超级计算资源。 许多大规模计算应用不仅仅需要一台超高性能的计算机，它还更需要由多种机器组成、多个系统合作的网络虚拟超级计算机。逐步拓宽其应用范围和涉及面。 这些应用要求将地理上分布、异构的各种高性能计算机、数据服务器、大型存储系统和可视化、虚拟现实系统等，通过高速互连网络连接并集成起来，共同完成一些缺乏有效研究办法和处理办法的重大应用问题。 各种Grid的称呼 元计算（metacomputing） 计算网格（computing grid） 数据网格（data grid） 信息网格（information grid） 知识网格（knowledge grid） 访问网格（access grid） 万维网服务（web service） What Are Grids ? GRID提供一个单一的、安全的、具有访问大规模的计算、数据和仪器设备等横跨多个组织的资源的能力 一种聚集网络上广泛分布的各种资源，进行大规模计算和数据处理的通用基础支撑结构； Grid对网络增加了许多新的协议和服务，是下一代Internet