盛大G云万台级服务器带外管理及其应用.docxVIP

盛大G云万台级服务器带外管理及其应用 盛大游戏 G云 闫强 服务器带外管理及应用 G云带外管理背景 带外管理原理 IPMI概述 IPMl架构 带外管理应用 命令行工具 DELL iDRAC HP ILO G云带外管理应用 服务器管理遇到的问题 运维自动化需求 万台服务器规模 安装agent带来的问题 硬件健康状况 服务器重启 远程Kvm 系统自动部署 解决之道—带外管理 基于IPMI的服务器管理及监控 ‐Intelligent Platform Management Interface 1998 IPMI v1.0 2001 IPMI v1.5 2004 IPMI v2.0 跨平台/多厂商支持 电源控制 硬件监控 报警 日志收集 SOL IPMI architecture Out of Band In Band IPMI – Software Stack IPMI LAN Packet Layering IPMI LAN Message Formats rsAddr/rqAddr 请求/响应的地址，长度为1Byte；最低位为0时表示地址码，为1时 表示软件ID；高7位表示具体的地址码和软件ID Cmd 命令代码，长度为1Byte。 completion code Cmd请求后的状态，长度为1Byte data 请求或响应的数据；由相应的命令定义 LUN 高6位为rqSeq，由请求者生成的一个序列号，低2位为rqLUN/rsLUN 响应/接收该消息子地址号 netFn 功能类别，长度为1Byte；偶数为消息请求、奇数为消息响应 Checksum 长度为1Byte。初始化checksum=1，所有被校验的字节和checksum 相加后取256的模，结果为0校验正确 /content/www/cn/zh/servers/ipmi/ipmi‐technical‐resources.html IPMI interface and functionality Interface In‐band KCS/BT/SSIF Out‐of‐band Lan Serial/modem Functionality Power control Status,power on/off,cycle,reset Monitoring Sensor Inventory Field replaceable unit Logging System event logging Alert Snmp traps format (pet) over Lan Serial console redirection Serial Over Lan（SOL） IPMI Limitations and Remote Assistant Card Limitations Only monitors “IPMI devices” ? Not RAID and Network No built‐in Web No Virtual media support Text‐only console redirection Compatibility problem Remote Assistant Card Hp‐iLO Dell‐iDrac IBM‐IMM …… 带外管理应用‐命令行工具 命令行工具：ipmitool 、ipmiutil、freeipmi 使用方式 方式 接口 IPMI驱动 特点 本地调用 本地操作系统 OpenIMPI 通过系通接口与BMC 通信，需要安装相关驱动 远程调用 网络 无需安装 通过网络以UDP 623报文与BMC 通信。与系统无关 ipmitool ipmitool [options…] command ipmitool mc info ipmitool mc reset [ warm | cold ] ipmitool fru print ipmitool ipmitool sdr list ipmitool sdr type Temperature ipmitool sdr type Fan ipmitool chassis status ipmitool [chassis] power cycle ipmitool [chassis] power off ipmitool [chassis] power on ipmitool [chassis] power reset ipmitool chassis bootdev pxe ipmitool chassis bootdev cdrom ipmitool sel info ipmitool sel list ipmitool user list ipmitool user set password