冷数据集中的流媒体存储系统节能方法.doc

冷数据集中的流媒体存储系统节能方法 柴云鹏1, 2　杨楠1, 2 （数据工程与知识工程教育部重点实验室（中国人民大学） 北京 100872）1 （中国人民大学信息学院 北京 100872）2 摘 要　快速增长的数据量使流媒体存储系统在降低能耗方面遇到严峻的挑战，而针对流媒体应用而进行的节能方法的研究还很少。首先，在对流媒体存储系统的节能问题进行详细建模的基础上，定量地分析了数据分布对节能和流媒体服务质量的影响，发现只有冷门数据的分布对节能的贡献最大，而且对服务质量的负面影响最小。其次，提出了一种冷数据集中的节能方法，将最冷的一部分数据集中存储在部分磁盘上来优化节能效果。最后，实验表明冷数据集中的节能算法在保障服务质量的前提下，使流媒体存储系统的节能效果获得了显著的提升。 关键词　节能，冷数据，流媒体，绿色计算 中图法分类号　TP334.5　　 文献标识码　A Cold Data Concentration: Energy Saving Method for Streaming Media Storage Systems CHAI Yun-peng1,2　YANG Nan2 (Key Laboratory of Data Engineering and Knowledge Engineering (Renmin University of China), MOE, Beijing 100872, China)1 (School of Information, Renmin University of China，Beijing 100872, China)2 Abstract　Streaming media storage systems have encountered serious challenges due to the rapid accumulation of the data volume. What’s worse, the researches on saving energy specially for streaming media applications are few. First of all, based on detailedly modeling the energy conservation problem in streaming media storage systems, we analyze data layout’s impacts on energy saving and Quality of Service (QoS) quantificationally. It is found that cold data contributes to energy saving the most, and has the least negative impact on QoS. Secondly, a new energy saving algorithm called Cold Data Concentration (CDC) is proposed, which puts the coldest data on part of the disks to optimize the energy saving effects. Finally, simulations validate that CDC saves much more energy than traditional energy saving methods with the guarantee of QoS. Keywords　Energy saving, cold data, streaming media, green computing 引言 近年来全世界的数据量呈爆炸性增长，根据IDC的估计，数据年增长率接近60%，即每经过约一年半的时间，全球的数据量就会翻一番。因此，存储系统的能耗越来越高，已经成为备受关注的一个问题。仅2008年一年，西欧所有的数据中心的电费开销即高达49亿欧元[1]。而互联网上新兴的流媒体服务增长更为迅速，例如YouTube的视频年增长率为123%，而Facebook的视频量每年增长高达239%[2]，都远远高于60%的数据年平均增长率。因此，流媒体存储系统中的节能问题非常重要和紧迫。 虽然针对一般存储系统节能问题的研究已经积累了一些优秀的成果，但是专门针对流媒体应用进行节能研究的还很匮乏。传统节能方法主要是针对访问集中的热门数据部分、或者整个数据集进行面向节能的重新分布，但是我们通过对流媒体存储系统的节能问题建立模型时发现，对流媒体存储系统节能影响最大的