高性能计算集群自治管理系统的研究.pdfVIP

高性能计算集群自治管理系统的研究 马 元1,2，曾 宇1,2，聂 华1，历 军1 （1. 中国科学院计算技术研究所 国家智能计算机研究开发中心，北京100080； 2. 中国科学院研究生院，北京 100039） 摘要：高性能集群具有大规模、廉价，高性能的特点，在提供给用户高性能的计算能力的同时，也给管理 员对集群的管理带来了复杂性。目前集群管理系统还停留在管理员察看数据和事件并做出判断的阶段，给 高性能集群的使用造成了庞大的管理开销。为了自动化管理员的操作,降低集群管理的复杂性，本文在分析 大规模集群的自治需求的基础上，提出一种新型的集群自治框架, 提供整体化自治管理方案.通过使用中间 件技术提供了良好的可扩展性和安全性，通过UI 提供了异步更新和良好的可交互性，使得集群管理系统具 有整体化的自我成型、自我愈合、自我保护、自我优化的属性。结合曙光DCAS 系统，在动态负载均衡系统 上实现，取得了良好的效果。 关键词：高性能计算 自治计算 集群管理 动态负载均衡 中图法分类号：TP303 High Performance Cluster Autonomic Management System Research Ma Yuan1,2,Zeng Yu1,2,Nie Hua1,Li Jun1 (1.National Research Center for Intelligent Computing System, Institute of Computing, Technology, Chinese Academy of Sciences, Beijing 100080,China; 2. Graduate School of the Chinese Academy of Sciences, Beijing 100039, China) Abstract: High Performance Cluster provides user high performance computing power; also bring complexity of system management. Current cluster management system can only rely on system administrator to monitor system log and maintain the system, It result to excessive management cost to High performance system usage. To lower the complexity of cluster management and administrator ’s operation, we propose a new autonomic cluster management system, which provides the whole cluster management system self-management, self-configuration, self-protection, self-optimization proprieties. We use Middleware technology to provide good scalability and security, use UI to provide async-update. Based on Dawning DCAS system, We design an autonomic dynamic load balance system, test show it provide good results. Key word ：HPC, Autonomic Computing, Cluster Management, DLB 1 引 言 摩尔定律反映了计算机产业的快速发 升。研究表明，IT 公司1/3 到1/2 的财政预 展，却逐渐导致了 IT 产业进一步发展的阻 算用在管理方面，防止集群系