下载-杭州师范大学图书馆.pptVIP

杭州师范大学图书馆系列讲座 杭州师范大学图书馆系列讲座 杭州师范大学图书馆系列讲座 杭州师范大学图书馆系列讲座 大数据时代的数据备份 2014年11月 李玉平 计算机硕士 杭州师范大学图书馆 提 纲 一、大数据时代 1.大数据概念的提出 2.大数据时代的特征 3.大数据时代面临的挑战 二、大数据时代的数据备份 1.备份的分类 2.常用备份工具与技术 个人电脑发展历程回顾 摩尔定律：每一美元所能买到的电脑性能，将每隔18个月翻一 倍以上。 杭州师范大学图书馆 QQ邮件需要多大的硬盘来存储？ QQ号码已经申请到了10位数，合计几十亿用户，据非官方数据显示腾讯邮箱用户数量为7亿，活跃用户7000万，平均每个人50M用量 0.05GB≈3500TB≈3.5PB 杭州师范大学图书馆 一、大数据时代 1.1大数据概念的提出 最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡，麦肯锡称：“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。” “大数据”在物理学、生物学、环境生态学等领域以及军事、金融、通讯等行业存在已有时日，却因为近年来互联网和信息行业的发展而引起人们关注。?大数据作为云计算、物联网之后IT行业又一大颠覆性的技术革命。 杭州师范大学图书馆 一、大数据时代 1.2大数据时代的特征 对于大数据时代，目前通常认为有下述四大特征： 第一： 数据量大：数据量级已从TB（1012字节）发展至PB乃至ZB 可称海量、巨量乃至超量。（B-KB-MB-GB-TB-PB-EB- ZB……BB） 第二： 类型繁多：愈来愈多为网页、图片、视频、图像等半结构化 和非结构化数据信息。 第三： 价值密度低：以视频安全监控为例，连续不断的监控流 中，有重大价值者可能仅为一两秒的数据流；360°全方位视 频监控的“死角”处，可能会挖掘出最有价值的图像信息。 第四： 速度快时效高：大数据时代对其时效性要求很高，这是大部 分数据挖掘最显著的特征。 杭州师范大学图书馆 一、大数据时代 1.3大数据时代面临的挑战 1数据挖掘：怎么取利用数据，利用云计算和数据挖掘等技术手段通过大数据的分析来为企事业单位提供一些有价值的东西。? ? 2数据备份：怎么保管好数据，主要是一些数据备份的工具和技术来保护好数据，以免数据丢失或者损坏给企事业单位带来巨大的经济损失。 利用大数据的基本特征，借助云计算和数据挖掘等有效工具，深度挖掘数据的价值，掌握好大数据分类、挖掘、决策支撑，并应用于企事业单位的日常运营、维护及战略转型中，对企业的可持续发展尤为重要。通过对公共大数据的分析、挖掘与利用，可减少欺诈行为及错误数据的负面作用，帮助企事业单位节省开支。例如英国政府即通过对大数据的挖掘节省大约330亿英镑/年。 大数据与云时代的到来，推进了信息化社会的前进步伐，各大企业的数据量已经从之前的MB、GB，迅速增长到现在的TB 甚至是PB、ZB 的级别。数据是企业信息应用的核心，企业的所有运行都是建立在数据的存储下。但有时人为操作的失误、硬件的损坏、黑客攻击、火灾等自然或非自然的原因都会造成数据的破坏或者丢失，都会给单位造成重大的损失。因此，在大数据时代下，保证数据的安全已经成为亟不可待的任务之一 杭州师范大学图书馆 二、大数据时代的数据备份 2.1分类 第一按照备份的介质 基于软件的备份：个人数据备份工具FileGee，腾讯微云 基于硬件的备份：RAID, 手工备份: 软盘备份，光盘备份，硬盘（U盘）备份 第二按照备份数据与原数据的时间差距 实时备份;镜像服务器, FileGee为近似实时 延迟备份：其余的 第三按照备份数据和原数据的大小差异 完全备份: 软盘备份，光盘备份，硬盘（U盘）备份，诺顿GHOST 增量备份：FileGee 第四按照备份数据和原数据存放的场所来划分 本地备份：磁盘阵列 异地备份：移动硬盘（U盘）备份，镜像服务器备份，云空间备份 杭州师范大学图书馆 二、大数据时代的数据备份 2.2常用数据备份工具和技术 1 FILEGEE FILEGEE是一种数据同步的软件，有如下几种同步方式： ●移动同步：每次执行任务时，源目录中的任何文件都会被移动到目标目录中。目标目录中相同文件被覆盖，源目录被清空。 ●镜像同步：每次执行任务时，任何在源目录中新建或在目标目