GPFS安装实施和维护.docxVIP

1.概述1.1 IBMGPFS功能介绍GPFS (General Parallel File System) 是IBM 公司第一个共享文件系统，起源于IBM SP 系统上使用的虚拟共享磁盘技术( VSD )。作为这项技术的核心，GPFS 是一个并行的磁盘文件系统，它保证在资源组内的所有节点可以并行访问整个文件系统。而且针对此文件系统的服务操作，可以同时安全地在使用此文件系统的多个节点上实现。GPFS 允许客户共享文件，而这些文件可能分布在不同节点的不同硬盘上。它提供了许多标准的UNIX 文件系统接口，允许应用不需修改或者重新编辑就可以在其上运行。GPFS 也支持UNIX 文件系统的工具，即：用户可以像使用普通文件系统一样使用基于GPFS 的文件系统，唯一不同的在于管理GPFS 文件系统的命令。GPFS 提供的文件系统操作服务可以支持并行应用和串行应用，它允许任何节点（这些节点属于同一个节点组）上的并行应用同时访问同一个文件者不同的文件。1.2 GPFS体系架构介绍GPFS 文件系统基本上由三层架构组成：磁盘，网络共享磁盘（NSD），GPFS 文件设备，如下图所示。?磁盘GPFS 文件系统最底层的是物理磁盘设备。原则上可以采用系统上任何块设备，包括磁盘，磁盘分区，逻辑卷。从物理连接上来看，GPFS 支持使用所有方式连接的磁盘。包括本地IDE 磁盘，本地SCSI 磁盘，光纤SAN 磁盘，iSCSI磁盘，等等。?网络共享磁盘（NSD）NSD 是由磁盘映射出来的虚拟设备，NSD 与磁盘是一一对应的关系。NSD 被标记了不同性来区分其用途，我们可以将磁盘标记为4 种用途：Desc Only：只存储GPFS 文件系统描述信息的磁盘。Data Only：只存储文件系统中的数据信息。Meta data only: 只存储文件系统中的目录结构inode 信息。Meta and data: 存储所有信息（默认）。?GPFS 文件设备GPFS 设备是一个可被系统挂载的文件设备，由NSD 创建而成，可以并行的同时挂载在多个节点上。?连接模式：如下图将存储LUN/disk 配置映射到GPFS集群节点–依据系统需求的不同，disk连接拓扑可能会有差异?SAN存储模式是将所有节点直接映射到所有节点?NSD模式只需由作为NSD Server的节点链接disk混合模式可以是部分节点直接连接存储，部分做为NSD Client，它们通过NSD Server，通过IP网络进行IO访问(Network Block IO)1.3 GPFS的优势?高性能GPFS 允许在同一节点内的多进程或者应用使用标准文件系统调用，同时访问（并发，读写）同一个文件。通过将节点内读写操作分布到多个磁盘上，大大增加了文件系统的带宽，通过整个系统的负载均衡避免了某个磁盘过大的读写。?跨平台设计GPFS 支持在一个集群内加入异构的平台。支持异构的硬件环境：System p, System x。支持异构的操作系统：AIX, Linux。?数据一致性GPFS 通过一套复杂的信令管理机制提供数据一致性。通过这套机制允许任意节点通过各自独立的路径到达同一个文件。即使节点无法正常工作，GPFS 也可以找到其它的路径。?数据安全性GPFS 是一种日志文件系统，为不同节点建立各自独立的日志。日志中记录metadata 的分布，一旦节点发生故障后，可以保证快速恢复数据。GPFS 的fail-over 功能通过规划，将数据分布到不同failure group 内达到高可用性，减少单点故障的影响。为了保证数据可用性，GPFS 在多个failure group 内为每个数据实例做备份，即使创建文件系统时没有要求复制，GPFS 也会自动在不同的failure group 内复制恢复日志。?系统可扩展性通过GPFS ，系统资源可以动态调整，可以在文件系统挂载情况下添加或者删除硬盘。系统处于相对空闲时，用户可以在已配置的硬盘上重新均衡文件系统以提高吞吐量。可以在不重新启动GPFS 服务情况下添加新节点。?管理简单GPFS 自动在各个节点间同步配置文件和文件系统信息，而且在同一个节点内，对GPFS 的管理可以在任一个节点上进行。2.GPFS安装配置步骤2.1 GPFS安装准备安装GPFS 之前必须配置：- 存储到IBM P 系列主机- 并且安装多路径软件包中存储的高可用-访问配置修改所有机器的/etc/hosts,将以下行加入，使得机器之间互相能解析主机名。/etc/hosts#gpfs start192.168.0.62gpfs1192.168.0.63gpfs210.66.5.51 App110.66.5.52 App210.66.5.53 App310.66.5.54 App4#gpfs end- 建立主机的信任关系（