logo

您所在位置网站首页 > 海量文档  > 计算机 > 数据结构与算法

高性能计算知识:GPFS文件系统深度解析.pdf 27页

本文档一共被下载: ,您可全文免费在线阅读后下载本文档。

  • 支付并下载
  • 收藏该文档
  • 百度一下本文档
  • 修改文档简介
全屏预览

下载提示

1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。
2.该文档所得收入(下载+内容+预览三)归上传者、原创者。
3.登录后可充值,立即自动返金币,充值渠道很便利
特别说明: 下载前务必先预览,自己验证一下是不是你要下载的文档。
  • 上传作者 linkinwhite(上传创作收益人)
  • 发布时间:2019-06-10
  • 需要金币50(10金币=人民币1元)
  • 浏览人气
  • 下载次数
  • 收藏次数
  • 文件大小:796.81 KB
下载过该文档的会员
你可能关注的文档:
高高性性能能计计算算知知识识::GPFS文文件件系系统统深深度度解解析析 免费群 IBM GPFS(General Parallel FileSystem)是一个分布式、共享、 并行集群文件系统 支持从多个节点同时对单一文件系统或 一组文件系统的访问。GPFS可以在AI 、Linux和windows操 作系统和IBM Power 、Intel/AMD x86架构下使用 被全世界 HPC用户广泛使用。GPFS集群中每一个节点都由管管理理命命令令 集集、GPFS内内核核扩扩展展、多多线线程程守守护护进进程程三个组件构成。 GPFS管管理理命命令令集集 是用来控制GPFS操作和配置的脚本集 合 默认情况下GPFS命令可以在集群中任何一个节点执 行 GPFS集群会自动处理并把请求的操作重定向到合适的节 点执行。可以定义为在所有GPFS节点同步 还是在一个子网 内的节点间同步请求。 第1页 GPFS内内核核扩扩展展提供了一个接口和操作系统的vNode、VFS层 交互模块 并注册GPFS作为一个Native文件系统 GPFS在操 作系统中以一个标准的处理应用下发给操作系统的请求。 GPFS守守护护进进程程处理所有I/O操作和Buffer管理 包括对于顺 序读进行Read-ahead 对于非同步的所有写进行Write-behind 操作 I/O操作被GPFS的Token管理保护 以确认数据分布在 集群中所有节点的一致性。GPFS守护进程会和其他节点的守 护进程共同工作 进行文件系统的配置变更、修复、并行更 新元数据状态。 GPFS NSD组件对运行在节点上的应用 提供一种在集群中 相对于直接访问普通硬盘的集群访问 集群中NSD可能会物 理的连接到所有的节点或者服务器上 数据通过NSD server 对外提供一个虚拟连接 最多可以为每个NSD指定8个NSD Server 如果其中一个服务器宕机了 列表中的下一个服务 器将会接管宕机的节点工作。 当启动GPFS和一个文件系统挂载的时候 GPFS通过守护进 程确认哪些NSD可以通过物理或者虚拟的方式访问 即NSD 的发现过程 NSD 的默认发现顺序是优先本地的块设备接 口 例如SAN 、SCSI和IDE 其次是NSD Server 。 第2页 对GPFS文文件件系系统统集集群群中中的的组组件件和其关系进行总结。Node在 GPFS文件系统中独立的OS实例 NSD则是对GPFS集群可见 用于创建文件系统的存储设备 NSD server提供对特定NSD 访问的I/O服务器 通过一组NSD创建的文件系统称为GPFS 文件系统。运行应用程序并通过挂载文件系统访问文件系统 节点称为Application Node。 GPFS支持配置一些节点直接连接到磁盘上而其他的一些节点 通过这些节点访问磁盘 这种配置组网通常在一些较大的 HPC集群中使用 提供一种低成本高性能的组网方式。当 GPFS节点为其他节点提供访问磁盘的服务时 这个节点称之 为NSD Server GPFS节点通过NSD Server访问数据时称之 为GPFS客客户户端端。服务器通常都会复用 以来降低成本 服 务器的许可可以作为客户端使用 但是有客户端许可的服务 器不能做服务器角色使用。 每个GPFS集群有一个集集群群管管理理服服务务器器 从设置为Quorum 的 节点中选举得来 并且可以通过命令更改 主要负责监视磁 盘状态 检测节点故障 执行节点恢复 确定仲裁节点是否 满足启动GPFS daemon管理与远程集群的通信 选择文件系 统管理节点。 第3页 每个文件服务器都会有一个文文件件系系统统管管理理服服务务器器 文件管理 服务器通过集群管理进行选择。文件系统管理服务器通常分 布在管理服务器中 文件管理服务器不可以跨节点 但是可 以在一台服务器上运行多个文件系统的文件管理服务器 文 件管理服务器通常有以下功能。 文文件件系系统统配配置置(添加磁盘 改变磁盘可达性 修复文件系 统 挂载、解挂载文件系统) 磁磁盘盘空空间间分分配配(控制磁盘的那个段的空间分配给哪个节点) 令令牌牌管管理理(令牌管理服务器通过授权令牌协调访问共享

发表评论

请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片

“原创力文档”前称为“文档投稿赚钱网”,本站为“文档C2C交易模式”,即用户上传的文档直接卖给(下载)用户,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有【成交的100%(原创)】。原创力文档是网络服务平台方,若您的权利被侵害,侵权客服QQ:3005833200 电话:19940600175 欢迎举报,上传者QQ群:784321556