logo

您所在位置网站首页 > 海量文档  > 计算机 > 数据结构与算法

高性能计算知识:关键技术和趋势分析.pdf 20页

本文档一共被下载: ,您可全文免费在线阅读后下载本文档。

  • 支付并下载
  • 收藏该文档
  • 百度一下本文档
  • 修改文档简介
全屏预览

下载提示

1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。
2.该文档所得收入(下载+内容+预览三)归上传者、原创者。
3.登录后可充值,立即自动返金币,充值渠道很便利
高高性性能能计计算算知知识识::关关键键技技术术和和趋趋势势分分析析 免费群 需求的膨胀推动着技术变革,技术的革 进一步丰富着我们 的生活,如今大数据、云计算技术跨界竞争和技术融合迫使 我们不断换血和补充能量来适应一次次变革。那么在人工智 能、虚拟现实、物联网等技术热潮过后,能预预测测到到的的下下一一个个 技技术术热热点点会会是是什什么么,,高高性性能能计计算算(HPC) ?面对技术和行业融 合现状,HPC应该再适合不过了,因为HPC是一个跟各个行 业结合比较紧密的技术。 回顾历史,传统HPC还是主要聚焦在仿仿真真、、物物理理化化学学、、生生命命 科科学学、、渲渲染染、、勘勘探探和和气气象象等六大场景,上层HPC集群化的特 定应用环境也是比较固定。 第1页 随着大数据、云计算和技术发展和行业融合,HPC在各个层 面的分类也发生了一些变化,根据HPC应用的目标市场可分 为HPC商商业业市市场场和HPC科科研研市市场场。 但随着大数据、云计算和技术发展和行业融合,综合技术和 行业趋势,HPC行业划分方法也发生了变化,目前主要分 为传传统统HPC( 以上述的六大场景为主),HPDA高高性性能能数数据据分分 析析、HPC Anywhere和HyperScale四四大大类类。 HPC Anywhere也实现了HPC和云的结合,例如Panzura、、 Ctera、、Avere和和Nasumi等等集集群群文文件件网网关关存存储储厂厂商商,他们提供 一个高高速速的的本本地地分分布布式式NAS系系统统,用于对对接接AWS、、Azure等等 这这样样的的公公有有云云对对象象存存储储和和一一些些低低速速的的NAS产产品品,通过这些 网关提供了一个缓冲层,可以设置策略让数据在网关和其它 第2页 存储之间流动,实现NAS或Obj ect存储直接与集群网关连 接,甚至与公有云链接。 在该专栏中,谈到的HPC,已经不仅仅是简单的一堆计算、 网络、存储、HPC软件等设备,而更多的是聚焦在HPC的发 展、主流玩家、技术趋势和HPC未来出路。 HPC系统涉及存储、计算节点、网络、HPC软件和L1层冷 却、机房、供电等多种复杂设备,但是从技术角度讲,服服务务 器器、、网网络络标标准准都都比比较较统统一一,,每每家家厂厂商商设设计计出出的的产产品品除除了了在在 管管理理方方面面差差异异较较大大之之外外,,其其他他方方面面基基本本保保持持在在同同等等水水平平。 然而标标准准不不一一、、最最容容易易提提升升方方案案竞竞争争力力的的还还是是存存储储设设备备。 HPC存储是在HPC应用环境下,为解决传统串行存储性能瓶 颈,所提出的专用存储。HPC存储侧的容容量量、、性性能能、、IOPS 与与HPC计计算算侧侧的的规规模模、、性性能能弱弱相相关关。HPC存储主要关注 点性性价价比比、、低低成成本本、、占占地地空空间间等等;在HPC典型应用场景下, 常见的业务模型大致如下: 在OR测试工具中,OPS实际上就等同于OPS,OR工具在 HPC的BenchMark测试中采用的是比较多的,主要原因是OR 第3页 对带宽和OPS都比较适合,并提供丰富的参数来模拟不同的 业务O模型。 随着闪存技术的成熟,HPC的传统的3层技术架构(即即计计算算节节 点点内内存存、、并并行行文文件件系系统统和和归归档档存存储储)也发生了变化。在HPC 系统中,并行文件系统(pFS)对HPC性能影响最大,在某种意 义上决定整个HPC存储性能。传统HPC架构应对超超大大规规模模 HPC集集群群计计算算节节点点同同时时Checkin Point需需求求时,显得力不从 心,那就需要在pFS之上多加一层高速大容量(相相对对于于 Memory) 的Cache(Burst Buffer) 。 Burst Buffer技技术术和和产产品品的的出出现现使使得得HPC计计算算架架构构发发生生了了变变 化化,,Campai n 存存储储如如同同数数据据热热备备,,它它的的出出现现给给数数据据生生命命周周 期期管管理理增增加加了了更更多多选选择择。我个人认为Burst Buffer技术只是一 个技术过度,如果改善系统性能的Hybird存储,不过,在目 前SSD还相当贵的状况下,Burst Buffer却能够更好的匹配超 大型HPC场景极致性能需求。在在性性能能和和容容量量空空间间比比在在

发表评论

请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片

“原创力文档”前称为“文档投稿赚钱网”,本站为“文档C2C交易模式”,即用户上传的文档直接卖给(下载)用户,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有【成交的100%(原创)】。原创力文档是网络服务平台方,若您的权利被侵害,侵权客服QQ:3005833200 电话:19940600175 欢迎举报,上传者QQ群:784321556