高性能计算09181.pptxVIP

如何快速构建高性能集群系统 解决方案中心 马少杰 部署规划及硬件安装 Sugon HPC Installer 批量部署操作系统 Clusconf 快速配置集群 Clussoft 快速安装软件 部署规划及硬件安装 千兆交换机 局域网 Internet 路由器 防火墙 远程控制 内网 外网 以太网 交换机 控制台 本地KVM 以太网 光纤网 Infiniband网 KVM管理网 登陆/管理节点 机房环境 并行存储系统 高速Inifiniband交换机 刀片集群 GPGPU节点 计算系统 存储系统 SMP胖节点 2 算例上传 作业提交 101100011010100100010010010010011000110101001000100100110001101010010001001001100011010100100010010000100100110001101010000100100110001101010000100100110001101010000100100110001101010 高性能计算作业的工作流程 集群配置表 机柜摆放 功耗14KW 功耗10KW 功耗10KW 功耗14KW 功耗14KW 普通风冷单机柜不能超过15千瓦，且各机柜负载最好均衡 控制台放置为中间机柜19U左右 交换机放置中间机柜，如果为上走线，则在机柜上部 原则1：同类相邻 同一种类型节点（硬件、操作系统，用途等）应该是连续的编号 原则2：从多到少 按用途：计算节点、IO节点、管理节点 计算节点内部：刀片最多，GPU节点其次，胖节点最少 原则3：从高到低 高端到低端：八路、四路、双路内存容量：64G、32G、16G 高度越高：5U、4U、2U、1U 以上原则冲突时，优先级：原则1〉原则2〉原则3 节点编号 CB85刀片计算节点：64台 GPU计算节点：8台 A950八路胖节点：2台 A840四路胖节点：2台 IO节点：4台A620 管理节点：2台A620 node1-node64 刀片CB85 node65-node72 GPU节点 node73-node74 A950 node75-node76 A840 node77-node80 IO节点A620 node81-node82 管理节点A620 第一套以太网络，配置为管理网 所有服务器的第一块网卡（eth0）接入同一物理网络，配置为集群管理网。机架式服务器对应第一块网卡eth0；刀片机箱对应第一个网络模块（一般是交换模块）。 管理网络IP地址和主机名规范为： 管理网对应的主机名“node”默认设置为系统主机名。此外，需要根据节点功能，在/etc/hosts中设置主机别名，比如： node1 comput1 … 0 node10 comput10 1 node11 io1 2 node12 io2 3 node13 admin1 4 node14 admin2 IP地址 IPMI IP地址设计 IPMI网络IP地址和主机名规范为： 刀片管理模块IP地址和主机名规范为： IP地址设置 IP地址 子网掩码 主机名前缀 10.10.20.x mnode IP地址 子网掩码 主机名前缀 10.10.30.x mblade 第二套以太网络（如果有，配置为备用管理网络或千兆计算网络） Infiniband网ipoIB IP地址和主机名规范为： IP地址设置 IP地址 子网掩码 主机名前缀 11.11.11.x bnode IP地址 子网掩码 主机名前缀 12.12.12.x inode 上架、布线、贴标签、上电。。。。。。 Sugon Installer 批量部署操作系统 Sugon HPC Installer 1 最合理的应用使用场景（每个工程师都有一个Windows笔记本，可随意切换操作系统镜像） 2 最广泛的兼容性（使用KS机制，不存在与系统的raid卡的兼容问题） 3最方便的使用（安装后单一命令修改IP地址） 用于网络批量自动化安装操作系统的软件，帮助简化集群操作系统的安装步骤，摆脱集群操作系统安装时对光盘及光驱的依赖 支持操作系统 Redhat CentOs Suse Windows 1. Sugon HPC Installer 简介 网络安装操作原理 必备条件： 第一，网络中有个放用来系统安装文件的地方，称之为系统安装服务器 第二，客户机的网卡支持远程启动 网络安装过程基于PXE，DHCP，TFTP，HTTP（NFS、FTP）协议 PXE(Pre-boot?Execution?Environment)是由Intel设计的协议，它可以使计算机通过网络启动。协议分为client和ser