大数据分析技术.PPT

大数据应用的技术体系及潜在问题 报告人：曹瑞 2017年04月07号 大数据概述 目录 大数据应用的技术体系 大数据应用所面临的问题 4. 总结 1.1 大数据的定义 维基百科对大数据的定义是，所涉及的资料量的规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的各种资讯。 主流定义为3V，即规模性（Volume），多样性(Variety)和高速性(Velocity)。所谓规模性，就是数据的量达到了一定的高度，无法通过当前主流工具来及时处理；多样性指的是对于即将要处理的数据类型，除了有结构化的以外，还有半结构化和非结构化的，增加了操作的复杂性；高速性是指数据的到达与处理必须及时高效，不允许较长的延迟。除此之外，隐私性与有价值性同样是大数据的主要特征。 1 1.2 大数据带来的机遇和挑战 随着大数据时代的到来，其中隐藏的商机也被各路商家发现和利用。美国Target百货公司通过一套客户分析工具，可以对顾客的购买记录进行分析，并随后通过购物手册的形式向顾客推荐一系列可能需要的商品；“京东”、“天猫”和“易购”等购物网站将其海量商品按照各种方式进行分类和推荐，大大增强了网站的可用性。 不单是商家，大数据处理技术也给普通用户的日常生活带来了方便性和可靠性。购物网站可以使用户足不出户便可购买到廉价优质的商品，