logo

您所在位置网站首页 > 海量文档  > 计算机 > 数据结构与算法

高性能计算知识:基础知识讲解.pdf 17页

本文档一共被下载: ,您可全文免费在线阅读后下载本文档。

  • 支付并下载
  • 收藏该文档
  • 百度一下本文档
  • 修改文档简介
全屏预览

下载提示

1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。
2.该文档所得收入(下载+内容+预览三)归上传者、原创者。
3.登录后可充值,立即自动返金币,充值渠道很便利
高高性性能能计计算算知知识识::基基础础知知识识讲讲解解 免费群 回顾过去15年,HPC一直是增长最快的IT市场 一,其增长 速度有时甚至超过了在线游戏、平板的年增长率,在云计 算、大数据和AI的推动下,HPC的应用类型更加复杂,要求 HPC方案必须与时俱进,需要不断匹配新技术来应对应用和 业务挑战,这就是笔者推出该专题的背景。 首先,让我们从高性能计算概念开始,逐步深入到技术细 节,掌握HPC关键技术和方案选型、设计等综合能力。 什什么么是是高高性性能能计计算算,,涉涉及及哪哪些些技技术术和和知知识识呢呢?? 高性能计算(High performance computing) 指通常使用很多处 理器(作为单个机器的一部分)或者某一集群中组织的几台计 算机(作为单个计算资源操作) 的计算系统和环境。高性能集 群上运行的应用程序一般使用并行算法,把一个大的普通问 题根据一定的规则分为许多小的子问题,在集群内的不同节 点上进行计算,而这些小问题的处理结果,经过处理可合并 为原问题的最终结果。由于这些小问题的计算一般是可以并 行完成的,从而可以缩短问题的处理时间。 高性能集群在计算过程中,各节点是协同工作的,它们分别 第1页 处理大问题的一部分,并在处理中根据需要进行数据交换, 各节点的处理结果都是最终结果的一部分。高性能集群的处 理能力与集群的规模成正比,是集群内各节点处理能力 和,但这种集群一般没有高可用性。 高性能计算的分类方法很多。这里就拿最传统的分法,从并 行任务间的关系角度来对高性能计算分类。 一一、、高高吞吞吐吐计计算算(High-throughput Computing) 有一类高性能计算,可以把它分成若干可以并行的子任务, 而且各个子任务彼此间没有什么关联。因为这种类型应用的 一个共同特征是在海量数据上搜索某些特定模式,所以把这 类计算称为高吞吐计算。所谓的Internet计算都属于这一类。 按照Fl nn 的分类,高吞吐计算属于SIMDSingle Instruction/Multiple Data,单指令流-多数据流) 的范畴。 二二、、分分布布计计算算(Distributed Computing) 另一类计算刚好和高吞吐计算相反,它们虽然可以给分成若 干并行的子任务,但是子任务间联系很紧密,需要大量的数 据交换。按照Fl nn 的分类,分布式的高性能计算属于MIMD (Multiple Instruction/ Multiple Data,多指令流/ 多数据流) 的范 畴。 有许多类型的HPC 系统,其范围从标准计算机的大型集群, 到高度专用的硬件。大多数基于集群的HPC系统使用高性能 网络互连,基本的网络拓扑和组织可以使用一个简单的总线 拓扑。HPC系系统统由由计计算算、、存存储储、、网网络络、、集集群群软软件件四部分组 成。 第2页 HPC高高性性能能计计算算具具备备哪哪些些特特性性?? 在存储通用市场,我们经常听厂商宣传产品NFS性能很高(有 些甚至都不支持pFS,NFS v4.1版本),就认为是高性能计算 存储产品,事实并非如此。HPC是多并非和带宽要求非常高 的计算场景,但除此 外,还需要配合并支持MPI应用集 群。个人认为,一个高性能计算存储产品或支持HPC的并行 文件系统,必须支持以下特性: 1、首先是pFS(文件系统),不同客户端和连接可以连接到不 同存储节点,实现并发访问。 2、支持Posix接口,利用客户端提升性能。 3、支持MPI并行消息接口,对IO访问进行优化。 3、按需可扩展(主要指容量,性能和网络扩展),在方案中往 往体现为在线增加存储节点或Building Block。 4、支持IB,OPA(原生RDMA,不是IP over Fabric) 网络,降 低访问时延。 5、同时支持高带宽(大IO),OPS(小IO)场景, HPC应用随着 应用发生变化,不是所有HPC集群应用都是带宽场景,此 外,有很多场景都是小IO,OPS场景,如EDA仿真。 HPC高高性性能能计计算算市市场场空空间间有有多多大大?? 第3页 在2016年的全年,我们报告说,HPC服务器市场的全球工厂 收入从2015年的107亿美元上升到创纪录的112亿美元,比 2003年的57亿美元增长了近两倍。 Intersect360研究将HPC市场定义为应应

发表评论

请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片

“原创力文档”前称为“文档投稿赚钱网”,本站为“文档C2C交易模式”,即用户上传的文档直接卖给(下载)用户,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有【成交的100%(原创)】。原创力文档是网络服务平台方,若您的权利被侵害,侵权客服QQ:3005833200 电话:19940600175 欢迎举报,上传者QQ群:784321556