Clussoft使用手册.pdf

HPC 软件环境自动部署工具Clussoft 使用手册 解决方案中心 李斌 2012.08 1.1 Clussoft 介绍 HPC 集群软件环境部署是一项复杂而繁琐的工作。HPC 集群的基础软件众多，各领域 的应用软件更是纷繁复杂，软件之间存在复杂的依赖关系，绝大部分软件需要从源代码编译， 还需要针对不同的硬件平台或网络环境进行不同的配置和优化，安装部署出错的概率很高， 对实施人员的技术经验要求较高。另外，HPC 集群软件如果采用手动安装的方式，工作量 巨大，重复劳动很多，效率低下，而且容易出现人为失误。 Clussoft 是曙光开发的HPC 集群软件环境自动部署工具，提供包括编译器、常用函数库、 并行库、GPGPU 开发环境、HPC benchmark 工具集、以及HPC 各领域的常用开源或非商业 应用软件的自动安装部署。Clussoft 将各个软件的编译安装都自动化和模块化，自动解决软 件依赖关系、自动针对软硬件平台选择优化配置，可以大大减轻集群实施人员的工作量，提 高集群部署效率，另外，也实现了HPC 软件实施的标准化，提高HPC 软件部署的质量。 Clussoft 广泛适用于不同规模的HPC 集群的部署实施，也可用于HPC 云平台的软件快 速自动部署。 1.2 Clussoft 的组成模块 Clussoft 采用模块化设计，根据HPC 软件类型，分为单独的若干个安装包，各安装包的 名称和功能如下： clussoft-base——基础安装包，提供编译器、函数库、并行库等基础软件的安装 clussoft-benchmark——HPC benchmark 工具集 clussoft-md——分子动力学、Monte Carlo 等应用软件 clussoft-qchem——计算化学、物理、材料类HPC 应用软件 clussoft-bio——生命科学领域的HPC 应用软件 clussoft-mets——气象、海洋领域的HPC 应用软件 clussoft-gpu——GPGPU 开发环境及应用软件 1.3 Clussoft 的兼容性 1.3.1 处理器架构 Clussoft 广泛支持基于Intel 或AMD 的x86_64 处理器。 1.3.2 操作系统 Clussoft 官方支持如下版本Linux 操作系统，其它操作系统可能会有部分问题： Red Hat Enterprise Linux 5.3-5.7 for x86_64 Red Hat Enterprise Linux 6.0-6.2 for x86_64 CentOS 5.3-5.7 for x86_64 CentOS 6.0-6.2 for x86_64 SUSE Linux Enterprise Server 10.2-10.4 for x86_64 SUSE Linux Enterprise Server 11.0-10.2 for x86_64 1.3.3 网络环境 Clussoft 广泛支持千兆、万兆以太网和InfiniBand 计算网络。 1.4 Clussoft-base 使用指南 Clussoft-base 是clussoft 系列软件的基础安装包，提供编译器、常用函数库、常用并行 库等基础软件的安装。 1.4.1 安装前准备 操作系统需要安装必要的开发包，如GCC 套件（gcc、g++、gfortran ）、cpp、make 、flex、 bison 等，可使用操作系统自带的rpm 包安装。如果clussoft 安装过程中提示某些开发包未 找到，请先使用rpm 包安装后，再执行clussoft 安装程序。 将 clussoft-base 软件包上传至集群。如果集群管理节点与计算节点的操作系统版本和 CPU 架构相同，安装操作可以在集群管理节点上进行，如果不同，推荐在一台计算节点上 执行安装操作。 在执行安装操作的节点上（管理节点或计算节点）将clussoft-base 解压缩。如果需要为 集群所有节点安装InfiniBand 驱动及工具OFED，需要将clussoft-base 解压缩到集群共享目 录（如NFS 、ParaStor ，NFS 的配置可以使用clusconf 集群工具），并