分层存储系统策略研究与软件实现.pdfVIP

杭州电子科技大学硕士学位论文

摘要

企业在高速发展时所需要保存的数据愈来愈多，然而所储存的一切数据并非都具备

非常高的使用价值，事实上存储系统容量和资源会被大量低使用价值的数据信息占据，

影响了性能。本文针对数据爆炸式增长所带来的大量低访问数据的保存问题，以及对存

储性能和存储成本之间的权衡问题，研究并提供了分层存储（HierarchicalStorage

Management，HSM）技术的软件实现策略。分层存储技术通过混合不同的存储设备并进

行分层管理，形成多个存储层级，通过预先定义迁移策略将数据自动迁移至相应级别的

存储中，在对存储设备进行数据的存取时，根据数据的使用价值划分数据，然后将其迁

移到访问速度级别不同的存储设备中。实现常用数据即热数据的读写更能被高效快速地

访问，冷数据能够不占用高性能磁盘的空间。

在本课题的研究中，旨在为存储阵列服务器的存储管理软件提供一项分层存储软件

系统，来管理冷热数据在不同存储设备的位置。本文的分层存储策略是基于逻辑卷管理

（LogicalVolumeManager，LVM）软件架构，LVM软件架构具有自由指定存储空间的

优势，并且稳定性好。本文对分层存储系统的分层功能原理以及如何设计分层功能进行

了详细阐述，着重介绍了分层功能中的监控和迁移这两个功能。在实现了监控和迁移等

功能后，从提高用户的便利性，优化数据的分类的角度出发，分别设计了定时功能和预

测迁移功能，并给出了相应的实现方案。在实现软件模块的功能后，对分层存储系统里

的文件在速度转变方面进行了测试，并将本文分层存储方案与基于块设备（BlockDevice）

的分层存储方案从设计、性能方面进行了对比。最后对分层存储的工作进行了总结以及

对未来的发展趋势进行了探讨。

关键词：分层，SSD，冷热数据，迁移，定时，预测

I

杭州电子科技大学硕士学位论文

ABSTRCT

Duringtherapiddevelopmentofenterprises,moreandmoredataneedstobesaved.

However,notalldatastoredhasveryhighusevalue.Infact,storagesystemcapacityand

resourceswillbeoccupiedbyalargeamountoflowusevaluedatainformation,whichaffects

performance.However,notalldatastoredhasveryhighusevalue.Infact,storagesystem

capacityandresourceswillbeoccupiedbyalargeamountoflow-usevaluedatainformation,

whichaffectsperformance.Inthispaper,aimingatthepreservationofalargenumberoflow-

accessdatacausedbytheexplosivegrowthofdata,aswellasthetrade-offbetweenstorage

performanceandstoragecost,thispaperstudiesandprovidessoftwareimplementation

strategiesforhierarchicalstoragetechnology.Hierarchicalstoragetechnologyformsmultiple

storagetiersbymixingdifferentstoragedevicesandperforminghierarchical