应用驱动的大数据与高性能计算融合平台.PDF

应用驱动的大数据与高性能计算 融合平台 国家超级计算天津中心（NSCC-TJ） 国家发改委“大数据处理技术与应用”工程实验室(BTALab) 孟祥飞 博士 内容提纲 第一部分 迈向信息社会 第二部分 天河大数据融合平台建设 第三部分 行业产业应用平台开发 第四部分 未来发展与思考 孟祥飞 mengxf@nscc-tj.gov.cn 内容提纲 迈向信息社会 • 2007年，图灵奖获得者Jim Gray在美国国家研究理事会计 算机科学和远程通讯委员会（NRC-CSTB）的演讲报告中 提出了科学研究“第四范式” Ø 第一范式 ：实验科学研究范式 Ø 第二范式 ：理论科学研究范式 Ø 第三范式 ：计算科学研究范式 Ø 第四范式 ：数据科学研究范式 • 以数据考察为基础，联合理论、实验和模拟一体 的数据密集计算处理研究 迈向信息社会 计算是工具，是产生数据和处理数据的工具 而数据是价值所在 大数据和超级计算、云计算融合 • 以计算为中心转向以数据为中心 计算密集型计算 数据密集型计算 Data System System Data Ø 数据存储与计算相分离 Ø 数据分布存储在计算附近 Ø 在计算之前加载数据 Ø 计算尽量利用数据局部性 • 由面向单一科学与工程计算发展为包含科学与工程计算、 数据处理、信息服务等多态计算 内容提纲 孟祥飞 mengxf@nscc-tj.gov.cn 大数据与超级计算、云计算融合：应用驱动 支持先进制造装备 研发、工艺仿真、 智能管理等 • 环保装备 • 工业机器人 • 无人机 风力发电机流体仿真 能源存储器传热仿真 • 集成电路 • 风电设备 水下机器人强度分析 无人机主翼梁强度校核 污水处理厂模架分析 • 高性能设计仿真：加快先进装备开发，降低研发成本 • 信息化集成：自动化制造和信息化管理，实现绿色制造 • 互联网+物联网：装备远程运维和智能管理 大数据与超级计算、云计算融合：应用驱动 98% 以上 大数据与超级计算、云计算融合：挑战 大数据对信息技术的挑战： 9/28/2017 11/2 1 大数据与超级计算、云计算融合：框架 Ø 通过云计算虚拟与集成技术实现大数据的采集与应用服务， Ø 通过高性能计算解决计算密集需求，并配合数据挖掘算法实现大数 据的分析处理， Ø 通过层次式动态可扩展存储系统实现海量数据的高效