深入浅出AWS高性能计算及最佳实践.pdfVIP

深入浅出AWS高性能计算及最佳实践 肖凌 解决方案架构师 2016年5月26 日 © 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved. 从基础架构上认识高性能计算 –HPC 与HTC HPC: 集群计算 （High Performance Computing ） • 以紧耦合集群的方式运行，对集群计算能力通常以集群CPU核数作为性 能指标。 • 对计算节点之间的通信延迟要求极低，以提高信息交互效率。 HTC: 网格计算 （High Throughput Computing ） • 通常需要大量的计算节点相对独立的完成计算任务。 • 计算节点之间的交互比较少，对网络通信的依赖度不高。 从基础架构上认识高性能计算 紧耦合集群 （HPC) 流体力学 地震勘探数据处理 天气预测 基因数据计算 材料仿真 天体物理 汽车碰撞仿真 深度学习 轻量数据存储 重度数据存储 风险建模 动画建模 分子建模 微电子验证 上下文搜索 图像处理 物流建模 地理信息系统 分布式网格计算（HTC） 传统的IT部署方式– 利用率与IT成本的矛盾 利用峰值工作 服务器部署资源 购买服务器 量部署IT资源 导致集群利用 购买服务器 效率低 购买服务器 未被利用的IT资源 计算资源的实际需求 时间 提高IT资源利用率也会增加成本？ 提高IT资源的利用率…... 更长的队列等待 ? 项目推迟 时间与项目周期。 ? 项目推迟 计算资源的实际需求 时间 HPC队列– 想说爱你不容易 IT运维团队和集群用户 • 集群用户– 快快快！ • 计算时间由计算任务决定，不易预估时间 • IT运维团队寻求高效的集群利用率 HPC队列: