大数据基础知识研究报告.ppt

大数据基础知识 电信云@大数据产品线 目录 大数据定义 大数据价值 大数据产业链 1. 大数据定义 共识， 全球数据量每年 +50% 的速度指数递增 工业、生产数据远大于我们 现在关注的消费数据 大量即时数据在价值未流失之前等待处理 大数据营销， 根据企业数据需要组织挖掘分析，并基于IT系统实时把分析提供给需要决策帮助的内部企业成员。 互联网统计 大数据是一个服务行业。 大数据是传统统计与互联网相结合的行业。 1. 大数据定义 大数据定义： 所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 主要的特点: Volume 数据体量 Velocity 数据速度 Variety 数据多样 Veracity 数据真实 2. 大数据价值 在阐述大数据价值时，先一起先学习下 数据价值 数据 信息 知识 智慧 数据是约定俗成的数值量化，对客观事物的数量、熟悉、位置及其相互关系进行抽象表示， 以适合在这个领域中用人工或自然的方式进行保存、传递和处理。 2. 大数据价值 数据价值 数据 信息 知识 智慧 信息是在时效内的一定含义的， 经过加工处理对决策有价值的数据流。 2. 大数据价值 数据价值 数据 信息 知识 智慧 通过人们的参与对信息进行归纳、演绎、 比较等手段进行挖掘， 使其有价值的部分沉淀下来， 并于已存在的人类知识体系相结合， 这部分有价值的信息就转变成知识。 2. 大数据价值 数据价值 数据 信息 知识 智慧 智慧是人类基于已有的知识， 针对物质世界运动过程中产生的问题根据获得的信息尽行分析，对比，演绎找出解决方案的能力。 智慧乃以知识为根基，加上的运用能力、综合判断、创造力及实践能力来创造价值。 2. 大数据价值 数据价值 数据 信息 知识 智慧 智慧是人类基于已有的知识， 针对物质世界运动过程中产生的问题根据获得的信息尽行分析，对比，演绎找出解决方案的能力。 智慧乃以知识为根基，加上的运用能力、综合判断、创造力及实践能力来创造价值。 2. 大数据价值 在此大数据作为服务工具，是数据分析能力的表现 对大数据分析，主要分为五个方面（提供大数据解决方案时的价值输出载体）： 可视化分析（Analytic Visualization） 数据挖掘算法（Date Mining Algorithms） 预测性分析能力（Predictive Analytic Capabilities） 语义引擎（Semantic Engines） 数据质量管理（Data Quality Management） 2. 大数据价值 可视化分析（Analytic Visualization） 2. 大数据价值 数据挖掘算法（Date Mining Algorithms） 数据挖掘算法是大数据分析的理论核心，其本质是一组根据算法事先定义好的数学公式，将收集到的数据作为参数变量带入其中，从而能够从大量复杂的数据中提取到有价值的信息。 著名的“啤酒和尿布”的故事就是数据挖掘算法的经典案例。沃尔玛通过对啤酒和尿布购买数据的分析，挖掘出以前未知的两者间的联系，并利用这种联系，提升了商品的销量。亚马逊的推荐引擎和谷歌的广告系统都大量使用了数据挖掘算法。 2. 大数据价值 语义引擎（Semantic Engines） 语义引擎是机器学习的成果之一。过去，计算机对用户输入内容的理解仅仅停留在字符阶段，不能很好的理解输入内容的意思，因此常常不能准确的了解用户的需求。通过对大量复杂的数据进行分析，让计算机从中自我学习，可以使计算机能够尽量精确的了解用户输入内容的意思，从而把握住用户的需求，提供更好的用户体验。苹果的Siri和谷歌的Google Now都采用了语义引擎。 2. 大数据价值 大数据解决方案在企业知识管理项目上的价值点： 1. 提供专业团队（数据建模、挖掘技术）与客户（行业专家）进行企业数据价值勘探。 2. 提供统一可扩展的元数据规则库构建方案。避免组织内产生不同信息和知识体系，保证数据的信息流通、知识管理、智慧创新。 3. 在公共大数据挖掘平台。 定制数据汇集，并依托平台集约化的全面高效支持的时效、海量、弹性、关联等核心能力下快速构建解决和集成实施方案。 4. 提供私有大数据挖掘平台解决、集成方