Redbud并行文件系统的可扩展存储管理机制.pdf

v01．38 第38卷第5期 计 算 机 学 报 No．5 2015年5月 CHINESE 2015 JOURNALoFCOMPUTERS May Redbud并行文件系统的可扩展存储管理机制 易乐天 舒继武 郑纬民 (清华大学计算机科学与技术系 北京100084) 摘要数据规模和并发访问的需求日益增长，可扩展能力成为并行文件系统的重要需求之一．文中提出了一种 基于非对称并行文件系统Redbud的高可扩展资源管理机制．该管理机制根据数据的访问特征，使用不同的树形结 构管理不同类型的数据，满足了文件数据和元数据的并发检索需求；该管理机制还使用文件级的数据分布机制，允 许用户利用各种策略进行目录和文件的管理，能满足文件级的数据访问性能、目录级数据可靠性等实际应用需求． 多个基准测试程序和实际应用程序的测试结果表明，文件的独占访问能达到磁盘95％的性能；同时，随着设备和应 用节点的增加，数据和元数据的并发访问性能线性增长． 关键词Redbud并行文件系统；高性能计算；存储资源管理；共享磁盘 中图法分类号TP311DOI号10．3724／SP．J．1016．2015．00961 Scalable inRedbudParallelFile High StorageManagement System YILe—-TianSHU ZHENGWei·—Min Ji——Wu Scienceand 100084) University，Beijing (DepartmentofComputer Technology，Tsinghua AbstractWith scaleand fileaccess ever-increasingstorage parallel pattern，thehighscalability becomesoneof of file this a scalable paper，wepresent importantrequirementparallelsystem．In mechanismforan file tothe storagemanagement asymmetricparallel filesaccess mechanism treestructuresto multiple manage pattern，themanagement leverages of fileindex of alsointroducea different u