海量存储系统的性能管理与监测方法研究.pdfVIP

第２９卷第７期　　　 计算机应用与软件 Ｖｏｌ２９Ｎｏ．７ ２０１２年７月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｊｕｌ．２０１２ 海量存储系统的性能管理与监测方法研究 李　超　梁阿磊　管海兵　李小勇 （上海交通大学　上海２００２４０） 摘　要　　海量存储系统是一个大规模分布式的集群存储系统，拥有着ＰＢ级的存储容量，存在着数以千计的并发访问。为实现对 海量存储系统的监控和管理，采用以ｇａｎｇｌｉａ为基础并且辅以各种改进和优化的监控模型，以满足海量存储系统的要求。从性能、功 能、可靠性以及资源优化等多方面入手，使模型不断完善，最终达到一个比较好的性能，为集群的监控和管理提供一个可靠的保障。 关键词　　海量存储　监控　ｇａｎｇｌｉａ　优化 中图分类号　ＴＰ３９　　　　文献标识码　Ａ ＭＡＳＳＳＴＯＲＡＧＥＳＹＳＴＥＭＰＥＲＦＯＲＭＡＮＣＥＭＡＮＡＧＥＭＥＮＴ ＡＮＤＭＯＮＩＴＯＲＩＮＧＭＥＴＨＯＤＳＲＥＳＥＡＲＣＨ ＬｉＣｈａｏ　ＬｉａｎｇＡｌｅｉ　ＧｕａｎＨａｉｂｉｎｇ　ＬｉＸｉａｏｙｏｎｇ （ＳｈａｎｇｈａｉＪｉａｏＴｏｎｇＵｎｉｖｅｒｓｉｔｙ，Ｓｈａｎｇｈａｉ２００２４０，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　ＴｈｅＭａｓｓＳｔｏｒａｇｅＳｙｓｔｅｍｉｓａｌａｒｇｅｓｃａｌｅｄｉｓｔｒｉｂｕｔｅｄｃｌｕｓｔｅｒｉｎｇｓｔｏｒａｇｅｓｙｓｔｅｍ．ＩｔｈａｓａＰＢｌｅｖｅｌｓｔｏｒａｇｅｃａｐａｃｉｔｙｗｈｅｒｅｔｈｅｒｅ ａｒｅｔｈｏｕｓａｎｄｓｏｆｃｏｎｃｕｒｒｅｎｔａｃｃｅｓｓｅｓ．Ｔｏｒｅａｌｉｚｅｍａｓｓｓｔｏｒａｇｅｓｙｓｔｅｍｍｏｎｉｔｏｒｉｎｇａｎｄｍａｎａｇｅｍｅｎｔ，ｔｈｅｐａｐｅｒｕｓｅｓａｇａｎｇｌｉａｂａｓｅｄａｎｄｒｉｃｈｌｙ ｉｍｐｒｏｖｅｄａｎｄｏｐｔｉｍｉｚｅｄｍｏｎｉｔｏｒｉｎｇｍｏｄｅｌｔｏｓａｔｉｓｆｙｍａｓｓｓｔｏｒａｇｅｓｙｓｔｅｍｒｅｑｕｉｒｅｍｅｎｔｓ．Ｔｈｅｐａｐｅｒｍａｋｅｓｅｆｆｏｒｔｓｏｎａｎｕｍｂｅｒｏｆａｓｐｅｃｔｓｓｕｃｈａｓ ｐｅｒｆｏｒｍａｎｃｅ，ｆｕｎｃｔｉｏｎ，ｒｅｌｉａｂｉｌｉｔｙａｎｄｒｅｓｏｕｒｃｅｏｐｔｉｍｉｚａｔｉｏｎｅｔｃ．ｔｏｃｏｎｔｉｎｕｏｕｓｌｙｐｅｒｆｅｃｔｔｈｅｍｏｄｅｌｆｏｒａｃｈｉｅｖｉｎｇａｂｅｔｔｅｒｐｅｒｆｏｒｍａｎｃｅ，ｓｏｔｈａｔ ｉｔｃａｎｐｒｏｖｉｄｅａｒｅｌｉａｂｌｅａｓｓｕｒａｎｃｅｆｏｒｃｌｕｓｔｅｒｍｏｎｉｔｏｒｉｎｇａｎｄｍａｎａｇｅｍｅｎｔ． Ｋｅｙｗｏｒｄｓ　　Ｍａｓｓｓｔｏｒａｇｅ　Ｍｏｎｉｔｏｒ　Ｇａｎｇｌｉａ　Ｏｐｔｉｍｉｚａｔｉｏｎ 理这些情况，保证集群的稳定运行。 ０　引　言 １．２　可靠性 作为大规模分布式的海量存储系统，任何时候在任何地点 随着人类社会的不断发展，信息呈现爆炸性增长的方式，产 都有可能出现故障，节点失效成为一个必不可少的需要考虑的 生的数据也越来越多。目前的存储系统容量已达 ＰＢ级，并且 因素。监控系统应该通过备份或者数据多向传输的方式来保证 继续向更高一级的层次发展。相关应用比如ＩＰＴＶ和数字娱乐、 在数据节点甚至是管理节点失效的时候仍然可以完成资源监控 ３Ｇ移动通信、石油勘探、视频监控等等，在实际运行过程中，都 的功能。 会产生大量数据和信息，有些在保证数据信息安全的同时还要 １．３　可管理性 保证使用者对于大量数据的快速访问，因此，对其存储系统的设 海量存储系统中对资源的监控是必不可少