大数据概述-大数据的概念-大数据的特点-大数据的速度及潜在价值.pptxVIP

大数据的速度及潜在价值 北京信息职业技术学院 | 朱立 参考文献 参考文献：深入理解大数据：大数据处理与编程实践 作者：黄宜华 出版社：机械工业出版社 引自51CTO.COM 2 目录 1 大数据的速度 2 大数据的潜在价值 3 如何获取大数据的价值 1 大数据的速度 大数据的速度是指数据创建、处理和分析的速度，它是由数据从客户端采集、装载并流动到处理器和存储设备、在处理器和存储设备中进行计算的速度所决定的。 1 大数据的速度 在当前的计算机环境下，由于处理器和存储等计算技术的不断进步，数据处理的速度越来越快，传统计算技术渐渐不能满足大容量和多种类的大数据的处理速度的要求。在交互式的计算环境下，海量数据被实时创建，用户需要实时的信息反馈和数据分析，并将这些数据结合到自身高效的业务流程和敏捷的决策过程中。大数据技术必须解决大容量、多种类数据高速地产生、获取、存储和分析中间的问题。 1 大数据的速度 一方面要解决大数据容量下的数据时延问题。所谓数据时延是指，从数据创建或获取到数据可以访问之间的时间差。大数据处理需要解决大容量数据处理的高时延问题，需要采用低时延的技术来进行处理。如对一次PB级大数据的复杂查询，传统结构化查询语言（SQL）技术可能需要几个小时，基本大数据技术平台希望将这一时延逐步降低到分钟级、秒级、毫秒级、完全实时，大数据技术正在做到这一点。 1 大数据的速度 另一方面要解决时间敏感的流程中实时数据的高速处理问题。对于对时间敏感的流程，例如实时监控、实时欺诈监测或多渠道”实时“营销，某些类型的数据必须进行实时分析，以对业务产生价值，这涉及从数据的批处理、近线处理到在线实时流处理的演变。 大数据的价值是与大数据的容量和种类密切相关的。一般来看，数据容量越大，种类越多，信息量越大，获得的知识越多，能够发挥的潜在价值也越大。但这依赖于大数据处理的手段和工具，否则由于信息和知识密度低，可能造成数据垃圾和信息过剩，失去数据的利用价值。 2 大数据的潜在价值 研究表明，数据的价值会随着时间的流逝而降低。简单地看，数据的价值与时间是成反比的。因此，数据处理速度越快，数据价值越能够更好的获得。大数据的价值也与它所传播和共享的范围相关，使用大数据的用户越多，范围越广，信息的价值就越大。大数据价值的充分挥发，依赖于大数据的分析和挖掘技术，更好的分析工具和算法能偶获得更为准确的信息，也更能发挥其价值。因此，大数据处理和分析的技术对于挖掘大数据价值的作用十分关键。 2 大数据的潜在价值 庞大的数据需要我们进行剥离、整理、归类、建模、分析等操作，通过这些动作后，我们开始建立数据分析的维度，通过对不同的维度数据进行分析，最终我们才能得到我们想到的数据和信息。以下工作必不可少。  项目立项前的市场数据分析为决策提供支撑； 目标用户群体趋势分析为产品提供支撑和商务支撑； 通过对运营数据的挖掘和分析为企业提供运营数据支撑； 通过对用户行为数据进行分析，为用户提供生活信息服务数据支撑和消费指导数据支撑。 3 如何获取大数据的价值 我们在进行数据挖掘前需要考虑我们需要用这些数据来干什么？需要建立怎么样的模型？然后根据模型与数据的关系来不断优化模型。只有建立了正确的模型才能让数据的挖掘和分析更有便捷。 工具只是一种手段，对于大数据的挖掘和分析，一定要通过建立模型来构建分析的维度。在工作的过程中，不断建立自己的数据分析思维，有了这样的数据思维，那再在工具的基础上，数据的挖掘和分析才能更加准确，才能最终提供有价值的数据支撑信息。 3 如何获取大数据的价值