大规模分布式数据的管理与传输程耀东.pptVIP

大规模分布式数据的管理 高能所计算中心 程耀东 中国·贵阳 2010-8-15 主要内容 数据快速增长 数据量增长到底有多快？视频、音频、图片… EMCIDC报告“数字宇宙十年—你是否准备好（2010.5.5）”称2010年数据量相当于750亿部16GB的iPad： 摆满北京国家体育场(鸟巢)15.5次， 伦敦温布利体育场 41次， 台北101大楼23次， LHC隧道151次 全球每人平均拥有11台iPad 福克斯电视台热门电视连续剧《24小时》连续播放1.25亿年 数据量达到1.2ZB 1MB=1024KB 1GB=1024MB 1TB=1024GB 1PB=1024TB 1EB=1024PB 1ZB=1024EB 高能物理数据量 Hepix 2010 14个主要站点在线存储空间达到87PB，而2007年才14PB，增加了5倍多 WLCG 在线存储：62PB，近线存储：58PB 大型实验 LHC: 15PB/year BES: 累积5PB 数据管理需求 数据量大 – 存的下 高速访问 – 取得到 广域分布 – 易分享 长期保存 – 存的妥 数据存储技术 在IT界，存储技术一直很火，为什么？ 看似简单的需求，实际上要求很高 数据存储技术从软件到硬件都在不断发展，以满足需求 存储连接方式 单机存储（DAS）? 网络存储（NAS, SAN） 存储管理软件 本地