文件系统在存储系统中的特殊作用概要1.ppt

群集服务器 客户端 FC交换机 Metadata控制器 SAN卷 每个群集服务器看到的是相同的SAN卷 用控制器统一管理群集服务器对SAN卷中文件的共享 可以支持从主机到存储的多路径合并 可以支持异构平台的互操作 GX 1 GX 2 GX 3 GX 4 FC通路 灵活卷 GigE 顾客网络 Linux 计算网格 GX Cluster GigE 群集网络 (可以构架为冗余) 10/100/1000 管理网络 FC失效恢复路径 汇聚 FC 或 ATA 磁盘架 InfiniBand 系统失效恢复连接 简单 所有参加计算的节点,可以看到所有数据 简化mount点的管理 在顾客端无需改动 透明 扩展 灵活卷的移动 失效接管 扩展性 将命名空间用于PB数量级数据 可管理性 Proj_ABC Eng Syn Sim Docs SW HW Proj_XYZ GX 1 GX 2 GX 3 GX 4 整体命名空间 Eng Proj_ABC Proj_XYZ HW SW Docs Sim Syn Fibre Channel 存储的 灵活卷 GigE 顾客网络 对位于SW目录上 文件的NFS请求 Linux Compute Grid GX Cluster GigE 群集网络 顾客可以mount到任何服务器上,存取整个命名空间 举例: 从位于GX1的服务器端口,存取位于GX3上的灵活卷SW 提供高性能选择 好处 创建跨多个控制器节点的灵活卷 将灵活卷的通量扩展到多GB/秒 将灵活卷的大小扩展到数百TB 传送多GB/秒的通量给重要文件和目录 保持管理的简单性 用相同的存储系统于多个应用需求 Projects X B C A1 A2 A3 B1 B2 C1 C2 C3 B C A1 A2 A3 B1 B2 C1 C2 C3 Linux 计算 网格 GX Cluster 整体命名空间 FV3 FV4 FV7 FV8 FV11 FV12 FV1 FV2 FV5 FV6 FV9 FV10 条带化的卷X 透明扩展 透明数据移动 用于存储扩展 好处 迅速无缝地启用新存储和/或应用 无需宕机时间 对计算节点透明,不改变命名空间 A B C A1 A2 A3 B1 B2 C1 C2 C3 Projects A B C A1 A2 A3 B1 B2 C1 C2 C3 把数据移到新添加的存储上 B B 整体命名空间 Proj A B C D A1 A2 A3 B1 B2 B3 C1 C2 C3 D1 D2 D3 C1 B1 GX 1 GX 2 GX 3 GX 4 Fibre Channel 存储的 灵活卷 GX Cluster A1 Proj A2 D1 B2 D2 C2 A3 B3 D3 C3 A3 ? A3? A3? ? 镜像的灵活卷 GigE群集网络 与整体命名空间透明结合 不需要修改顾客 直接mount到有镜像数据的节点, 可以从本地镜像读取数据 需要远程数据的DFS请求, 将被轮流分布到可用的镜像上 举例: 灵活卷A3读取频率很高 GX3正在变饱和 镜像创建在GX2,3,4 Mount到GX2,3,4的顾客可以直接读取 Mount到GX1的顾客将通过DFS从其它三个节点读取A3数据 透明数据移动 适宜优化负载 好处 优化性能 充分利用磁盘空间 不影响应用运行 对顾客透明, 不改变命名空间 举例: 优化项目A的响应时间 A B C A1 A2 A3 B1 B2 C1 C2 C3 Projects A B C A1 A2 A3 B1 B2 C1 C2 C3 项目A 得到专用资源 应用情况: 分层存储 根据磁盘的价格/性能比匹配磁盘 在同一命名空间内管理主存储与二级存储 分层存储应用: 归档 盘到盘备份 引用数据 应用情况: 顺序I/O应用 用ATA的价格,取得FC的性能 对不同的磁盘或应用要求,提供不同的RAID保护(如提供2块磁盘失效的数据保护) B C A2 A3 C1 C2 A Projects A B C A1 A2 A3 B1 B2 C1 C2 C3 A1 B1 主存储 (所有工作负载得到最高性能) 二级存储 (较低的 $/GB) B2 C3 灵活卷移动时命名空间保持 传统卷，FlexVol 卷是存储的基本建设模块 数据管理的操作和计划均围绕卷进行 快照 备份和恢复 空间的分配和供应 问题在于: 卷与底层的磁盘是密不可分的 缺乏灵活性 难于按应用特性分卷 空间利用率低 性能难于优化 数据存储和管理的主要单位仍旧是WAFL? 卷 FlexVol: 不再直接与物理存储挂钩 FlexVol: 每个aggregate可有多个 存储空间能够很容易被再分配 Aggregate Disks Disks Disks FlexVols