怎样满足超级计算环境中的高性能存储需求.pdfVIP

企业级RAID主导厂商为超级计算机环境提供可扩展的企业 级强化SAS存储 LSI和DataON在SAS交换架构环境中使用企业级RAID技术，为超级计算市场提供 可扩展的高性能存储。 超级计算环境要求无间断地访问海量数据，需要将这些数据提供给分布广泛的用 户群体。例如，欧洲核子研究中心网格项目下的欧洲网格基础设施就有45 个国 家的240 多家机构参与，支持的学科超过20 个，包括生物信息学、气候变化、 教育、能源等等。这些领先的科学、研究和工程正在推动社会向前发展，并建立 各种解决方案用以应对21 世纪人类所面临的医疗、环境等挑战。因此，这项工 作的进展不应受到数据存储的限制。 建立数据存储并提供扩展解决方案用以满足高性能计算(HPC)环境不断增长的需 求，这个工作绝非易事。例如聚变能实验在一天内产生的数据量就高达100 太字 节。为这种环境提供的存储方案需要集成最高质量的组件，用以实现行业领先的 性能，同时能够在不干扰用户使用的前提下实现动态扩展。 这促使SAS 、企业RAID 和应用加速解决方案的行业领跑者LSI 与面向高性能及企 业计算市场的高性能存储机箱领先开发商DataOn 联手，共同提供具有高扩展能 力的存储解决方案以满足高性能计算环境对性能、容量和数据可靠性的严格要求。 对可扩展能力的需求 21 世纪的超级计算环境让当今世界的技术和科学进步成为现实。它们使科研人 员能够把几年前还被认为是“科幻”的内容变为现实。使用超级计算机，我们能 够眺望广袤的宇宙深空，能够深入细微的量子世界。细数各种先进的超级计算技 术，例如Oak Ridge 国立实验室(OCNL)用于研究气候变化的Phoenix 系和Jaguar 系统，或者伊利诺伊州立大学国家超级计算应用中心(NASA)环开发出的最新给药 方法，这些系统可以帮助我们战胜疾病，解决粮食短缺问题，探索神秘的宇宙。 随着阻碍计算能力发展的障碍被一个又一个的扫清，真正的挑战在于如何为这些 系统提供大量高性能存储。这就是为什么在2011 年7 月12 日出版的HPCwire 杂志中Oak Ridge Leader-ship Computing Facility 的负责人Galen Shipman 表示，让 他夜不能寐的挑战在于“如何提供高性能、高可靠性、高扩展性的I/O 系统，用 以满足各个领域不断增长的用户需求”。 为满足这项挑战，所使用的高性能存储需要能够以前所未有的速度交付数据，并 且能够进行扩展，用以存储数十拍字节的数据。例如，Jaguar 超级计算机有一万 太字节的磁盘空间，而Oak Ridge 国立实验室的高性能存储系统(HPSS) 目前存储 了超过7 拍字节的数据，而且还在以每天40 太字节的速度增加。在真正的超级 计算环境中，每天有大量新数据产生并会填满整个存储子系统的这种情况是一种 普遍现象。 超级计算项目的成功与否往往与超级计算机关系不大，而是与支持超级计算项目 的存储有很大关系。这就是为什么存储设备不仅要快速、安全和可靠，还要能够 进行动态扩展，而且要求扩展过程不能中断用户的访问。 关键在于规划 在规划超级计算环境的存储设施时，首先需要决定是采用直接附加存储(DAS)方 案还是存储区域网络(SAN)。众所周知，SAN 的优势在于能够让多部服务器访问 共享存储。不断增大存储容量很容易办到，因为可以根据需要方便地向架构中增 加存储机箱。但是与DAS 相比，SAN 显得更加复杂，管理难度更大，成本更高， 而且更为重要的是，数据处理能力明显低于DAS 方案。 DAS 也有许多优势。DAS 是使用最为广泛的存储部署方式，具有安全、可靠和管 理方便的特点。与SAN 相比，DAS 具有更高的性能和易用性。 SAS 存储的每端口吞吐能力高于光纤通道或者iSCSI。基于SAS 的存储解决方案通 过多通道6Gb/s SAS “宽端口”连接。每个SAS 多通道宽端口都有4 条通道，每 通道最大数据传输速率为6Gb/s 。这就意味着每个物理SAS 宽端口连接器可以支 持高达24Gb/s 的数据吞吐能力。而目前iSCSI 的每端口最大数据速率为10Gb/s， 光纤通道的每端口最大数据速率是8Gb/s，与它们相比，SAS 明显具有最高的每 端口吞吐能力。 SAS 和SAS 交换技术将DAS 的高吞吐能力和低延迟优势与交换架构相结合，能 够提供与 SAN 一样的共享存储访问能力。 对传统的DAS 环境而言，存在两项重大挑战。首先是难以在不中断使用或不增 大延迟的情况下向现有系统增加存储。往往增加存储的时候系统必