基于私有云的海洋观测数据同步存储策略研究-中国云计算.PDF

第３０卷第４期　　　 计算机应用与软件 Ｖｏｌ３０Ｎｏ．４ ２０１３年４月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ａｐｒ．２０１３ 基于私有云的海洋观测数据同步存储策略研究 黄冬梅　乔　欢　张　弛 （上海海洋大学信息学院　上海２０１３０６） 摘　要　　研究发现海洋实时观测数据存储系统在运行中常出现延迟甚至内存溢出等问题，针对该问题提出一种基于私有云存储 的同步策略，该策略能解决上述因存储海量实时数据而带来的性能问题并节约存储成本。 关键词　　私有云存储　海洋实时观测数据　同步 中图分类号　ＴＰ３０９　　　　文献标识码　Ａ　　　　ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１０００３８６ｘ．２０１３．０４．０５０ ＳＴＵＤＹＯＮＰＲＩＶＡＴＥＣＬＯＵＤＢＡＳＥＤＳＹＮＣＨＲＯＮＯＵＳＳＴＯＲＡＧＥＳＴＲＡＴＥＧＹ ＦＯＲＯＣＥＡＮＯＢＳＥＲＶＡＴＩＯＮＤＡＴＡ ＨｕａｎｇＤｏｎｇｍｅｉ　ＱｉａｏＨｕａｎ　ＺｈａｎｇＣｈｉ （ＣｏｌｌｅｇｅｏｆＩｎｆｏｒｍａｔｉｏｎＳｃｉｅｎｃｅ，ＳｈａｎｇｈａｉＯｃｅａｎＵｎｉｖｅｒｓｉｔｙ，Ｓｈａｎｇｈａｉ２０１３０６，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　Ｉｔｉｓｆｏｕｎｄｉｎｔｈｅｓｔｕｄｙｔｈａｔｔｈｅｓｔｏｒａｇｅｓｙｓｔｅｍｏｆｒｅａｌｔｉｍｅｏｃｅａｎｏｂｓｅｒｖａｔｉｏｎｄａｔａｏｆｔｅｎｈａｓｔｈｅｐｒｏｂｌｅｍｓｏｆｓｙｓｔｅｍｄｅｌａｙｏｒｏｕｔ ｏｆｍｅｍｏｒｙｅｒｒｏｒｉｎｏｐｅｒａｔｉｏｎｐｒｏｃｅｓｓ．Ｆｏｒｔｈｉｓｉｓｓｕｅ，ｗｅｐｒｅｓｅｎｔａｓｙｎｃｈｒｏｎｉｓａｔｉｏｎｓｔｒａｔｅｇｙｂａｓｅｄｏｎｐｒｉｖａｔｅｃｌｏｕｄｓｔｏｒａｇｅ．Ｔｈｉｓｓｔｒａｔｅｇｙｃａｎ ｅｆｆｅｃｔｉｖｅｌｙｓｏｌｖｅｔｈｅｐｅｒｆｏｒｍａｎｃｅｐｒｏｂｌｅｍｃａｕｓｅｄｂｙｓｔｏｒｉｎｇｍａｓｓｉｖｅｒｅａｌｔｉｍｅｍａｒｉｎｅｄａｔａ，ａｎｄｃａｎｓａｖｅｔｈｅｓｔｏｒａｇｅｃｏｓｔｓａｓｗｅｌｌ． Ｋｅｙｗｏｒｄｓ　　Ｐｒｉｖａｔｅｃｌｏｕｄｓｔｏｒａｇｅ　Ｏｃｅａｎｒｅａｌｔｉｍｅｏｂｓｅｒｖａｔｉｏｎｄａｔａ　Ｓｙｎｃｈｒｏｎｉｓａｔｉｏｎ ０　引　言 １　海洋观测数据同步存储策略 随着数据流模型的实例化研究平台———“‘数字海洋’辅助 １．１　私有云存储逻辑结构模型 决策系统”的建设和完善，海区中心站服务器观测数据的属性 根据研究国内外私有云存储系统和针对我国“数字海洋” 值分别存储到不同业务需求的专题数据库中，如何对海量观测 辅助决策系统在业务使用中的实际需要，本文确定了基于私有 数据动态分配存储空间以保证其存储系统的负载均衡性和可靠 云存储的架构，并在私有云存储系统的架构中采用了不同的虚 性成为了工作的瓶颈。比如海洋观测台站以频率为每分钟发送 拟化技术，如图２所示。 一条大小为１ｋＢ的观测数据到海洋中心站，假设某海区中心站 同时接收１０个海洋中心站发送的实时观测数据，其中每个海洋 中心站由１０个观测台站组成。而且当服务器集群在分配存储 空间的同时，一些服务器仍需面对负载比较重的请求比如进行 计算密集的查询、数据库访问等；而大部分服务器仅仅负载比较 轻的请求比如只需要读一个 ＨＴＭＬ页面或者进行很简单的计 算，该服务器集群的负载不均衡将会导致个别服务器死机甚至 造成整个数字海洋系统的工作效率降低。如图 １所示，实际研 发中海量数据匹配造成的服务器死锁崩溃。 图２　私有云存储子系统架构图