大数据培训资料.pptVIP

大数据(big data) 什么是大数据？ 具有4V特性的数据： Volume(巨大的数据量): Variety(数据类型多): 文本/图片/视频 等非结构化/半结构化数据 Velocity(处理速度快): 要求系统在短时间内做出反应 Value(价值密度低): 单条数据无价值,无用数据多,综合价值大 3亿用户,每天上亿条微博. 巡天望远镜,已收集140兆兆字节数据 2015年全球移动终端产生的数据量6300PB 案例 两年半前海地地震，海地人散落在全国各地，援助人员为弄清该去哪里援助手忙脚乱。传统上，他们只能通过飞往灾区上空来查找需要援助的人群。 一些研究人员采取了一种不同的做法：他们开始跟踪海地人所持手机内部的SIM卡，由此判断出手机持有人所处的位置和行动方向。正如一份联合国(UN)报告所述，此举帮助他们“准确地分析出了逾60万名海地人逃离太子港之后的目的地。”后来，当海地爆发霍乱疫情时，同一批研究人员再次通过追踪SIM卡把药品投放到正确的地点，阻止了疫情的蔓延。 非结构化数据 相对于结构化数据而言,不方便用数据库二维逻辑表来表现的数据即称为非结构化数据,包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音频/视频信息等等。 作为特指的大数据，其中的“大”是指大型数据集，一般在10T B