HPC China 2013：迈入高性能计算时代.docVIP

HPC China 2013：迈入高性能计算时代 　　大数据、云计算，这无疑是近些年来IT业界最为炙手可热的两个“流行词”。不过，当人们热衷于谈论这些概念的时候，却忽视了其背后的一个重要技术：高性能计算。尽管高性能计算不是实现大数据和云计算应用的惟一支撑，但是毫无疑问，没有了高性能计算，大数据和云计算概念是有缺憾而且不完整的。 　　不过，时至今日还是有很多人认为，高性能计算和超级计算机只是停留在实验室里的产物。殊不知，其目前已经应用于包括金融、能源、地质勘探、互联网等多种领域之中。“高性能计算正在逐渐深入到我们的实际应用之中。”在2013年10月29日～31日举办的全国高性能计算学术年会（HPC China 2013）上，业内多位专家均抛出了这样的观点。 　　大数据大发现 　　高能物理、高性能可视化与可视化分析、生物学、气象，甚至社交网络，这些都成为了HPC China 2013会议的演讲主题。与以往不同的是，本届全国高性能计算学术年会不仅将重点放在了对高性能计算技术的论证和研讨上，同时还将多场演讲的主题与大数据应用挂钩。 　　这也就无外乎，为什么大数据分论坛成为本次大会最为火热的一个场次了。“从大数据到大发现”，这是中国科学院高能物理研究所研究员孙功星在HPC China 2013上的演讲题目。这一题目其实可以很好地概括高性能计算与大数据之间的联系。 　　孙功星介绍说，在高能物理领域的大数据处理过程主要包括三个方面：首先是Data Recording，也就是从探测器中获取Raw Event，以二进制格式记录探测器信号，再由计算机产生模拟实验的蒙特卡罗模拟数据，将物理信号数字化；然后是Data Processing，即读出Raw/MC Raw，处理产生相关物理信息，如动量、对撞顶点等；最后就是Data Mining，这一步是物理学家对由上千个属性所组成的DST Event文件进行分析，并最后产生物理结果。 　　“现在我们已经在开始尝试采用Hadoop本地系统进行研究。采用Hadoop方案之后，对于网络、磁盘阵列的需求减少很多。”孙功星表示，“未来高能物理领域将会产生出更多数据，这会为计算带来更大的挑战。因此，高能物理未来的发展趋势是与新型的计算机体系结构，以及高性能计算机结合起来。” 　　孙功星的观点也可以说是代表了目前业界的一种普遍观点。曙光公司副总裁邵宗有在本届学术年会上就向记者表示：“高性能计算完美契合了大数据在运算能力、高性能存储等方面需求，而大数据则给高性能计算提供了新型商业市场，有助于推动高性能计算拓展新的市场蓝海，两者在产业生态链上的紧密衔接可以很好地推进信息资源组织模式的深入变革与发展。在应对大数据挑战的过程中，高性能计算可以起到重要作用。从数据的存储与处理的角度来说，采用高性能计算系统不仅可以大幅降低大容量存储的成本，而且其处理数据、传输数据、恢复数据的速度会远远超过普通的计算系统。在过去完整恢复一块硬盘的速度可能需要48个小时，但融合了曙光高性能计算技术的存储产品，能将时间控制在十几分钟，显著降低了大规模集群存储系统中用户运维的压力，提高了系统效率。” 　　构建完整生态体系 　　从全球领域来看，伴随着技术的不断进步，高性能计算的应用范围不断扩大，其正在迸发出前所未有的活力。而在这一过程中，相关厂商的作用不容忽视。一方面，他们将科研成果加以实践和应用；另一方面，他们还在积极地营造出一个高性能计算的生态系统，培养更多技术人员。 　　孕育技术、培植市场、发现商机，再由厂商对科研进行资助，这种循环模式在高性能计算的领域已经形成了一种良性商业循环。HPC China 2013现场所举办的“2013全国教育科研并行应用程序优化大赛”，就是这种循环的体现。在这场主题为“寻找优秀并行应用，提高并行程序性能”的比赛中，汇集了来自中科院计算所、中科院软件所、中科院超算中心、国防科技大学计算机学院、中国科学技术大学、西安邮电大学、清华大学计算机系，以及山东大学等研究机构和高校的8支团队。 　　中国计算机学会高性能计算专业委员会（CCF TCHPC）与英特尔（中国）有限公司共同主办了这次比赛，并由北京并行科技有限公司所承办。最终，国防科技大学计算机学院以优异的并行程序性能夺得桂冠，获得5万元奖金和“微异构优化奖”奖杯及证书。中国科学技术大学和清华大学计算机系共同获得第二名，分别获得1万元奖金，以及“微架构优化奖”和“多线程及MPI优化奖”奖杯及证书。另外五支参赛团队分别获得5000元奖金及“并行应用优化奖”奖杯。 　　在本次比赛中，应用到了并行科技所开发的大数据可视化软件 Paramon应用运行特征收集器和Paratune应用运行特征分析器。并行科技总经理陈健表示：“对很多人而言，高性能计算有如阳春白雪，过