大数据思维与决策.ppt

2016.04.27;个人简介;提 纲;大数据订外卖披萨的案例;1、数据定义 ;2、信息革命;3、能源革命 ;一、大数据时代;一、大数据时代; 最早提出“大数据时代”到来的是麦肯锡：“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。?;2014年10月29日，国务院常务会议特别强调了要扩大移动互联网、物联网等信息消费，提升宽带速度，支持网购发展和农村电商配送。加快健康医疗、企业监管等大数据应用。 2015年的《政府工作报告》也强调，要制定“互联网+”行动计划，推动移动互联网、云计算、大数据、物联网等与现代制造业结合，促进电子商务、工业互联网和互联网金融健康发展。; 如果一个个人拒绝大数据时代，可能会失去生命； 如果一个国家拒绝大数据时代，可能会失去这个国家的未来！;1、大数据的定义;?涂子沛《数据之巅》《大数据》;Velocity 高速;2、大数据的特征 ;Veracity 真实;大数据能做一个预言家 谷歌和推特都曾用大数据，提前7天到一个月，在2009年准确预测当年的流感趋势 一小时的视频，在不间断的监控过程中，可能有用的数据仅仅只有一两秒 大数据分析犹如“大海捞针”;2、大数据的特征 ;3、大数据的应用（1） ; 丹麦风轮机制造商维斯塔斯，在世界上最大的超级计算机上部署IBM大数据解决方案，通过分析包括PB量级气象报告、潮汐相位、地理空间、卫星图像等结构化及非结构化的海量数据 优化风力涡轮机布局，有效提高风力涡轮机的性能，为客户提供精确和优化的风力涡轮机配置方案； 帮助客户降低每千瓦时的成本； 提高客户投资回报估计的准确度； 将业务用户请求的响应时间从几星期缩短到几小时。;数据即能量（Energy）：电力大数据使用过程中不断精炼而增值 数据即交互（Exchange）：电力数据同行业外数据的交互融合 数据即共情（Empathy）：挖掘和满足电力用户，建立情感联系，提供电力服务;3、大数据的应用（3）;5、大数据的好处 ;大数据核心 是预测 ;1、不是随机样本，而是全体数据 ;诺贝尔奖自1901年创办至2016年共110届的诺贝尔数据，排除48次空缺或无生辰资料及23个机构获奖外，提供了877份科学家的案例，统计如下：;三、大数据思维;　 腾讯科技讯 2月8日，猴年除夕红包： 红包收发总量：微信80.8亿个；QQ：42亿个，双双创下历史新高。 微信：共有4.2亿人收发红包， QQ：在“刷一刷”抢红包中吸引3.08亿人。 微信，广东人发送的红包最多，收到的也最多；除夕当天，有人收到5279个红包，也有人发出79193个红包。 “年度最值钱”的红包照片，共收到597个红包；来自河南的29岁女性用户，为了看照片共发出了219个红包，当日最多。;允许不精确 “ 小数据 ” 最基本、最重要的是减少错误，保证质量； 大数据的简单算法比小数据的复杂算法更有效 数据多比少好，更多数据比算法系统更智能还要重要；;大数据与葡萄酒品质预测 ;大数据与葡萄酒品质预测 ;大数据与葡萄酒品质预测 ;“ 是什么 ” 而不是 “ 为什么 ” 相关关系核心是量化两个数据值之间的数理关系 相关关系通过识别有用的关联物来帮助我们分析一个现象，捕捉现在和预测未来；而不是揭示其内部的运作机制 相关关系帮助更好地了解这个世界;大数据折扣零售商与怀孕预测案例;大数据流感传播预测案例 ;大数据与机票价格预测 ;4、小结;ETL （Extract-Transform-Load） 数据众包 CrowdSouring;四、大数据技术;??、大数据技术;AutoGrid——由前斯坦福大学智能电网研究室负责人AmitNarayan创办的服务于电力、能源行业的大数据公司。通过建立能源数据平台，收集并处理其客户接入智能电网的智能仪表等设备的数据，面向其客户或合作方提供需求响应优化及管理系统，实现实时资源预测、资源优化、自动需求响应、客户通知引擎和事后分析等功能。 单个DROMS集群每天可以产生数以亿计的能源消费的预测数据。;Opower——Opower公司是于2007年创办的一家家庭能源数据分析公司。Opower与电力公司合作，抢占家庭消费者“入口”，获取家庭消费者的能源使用数据，进行消费者用电行为分析，并为其提供节能减耗的方案，推动节能的互联网应用。 ; 法国电力公司(EDF)基于大数据的分析预测：目前全法已经安装3500万智能电表，电表产生的数据量将在5-10年内达到PB级。 智能电表采集的主要是个体家庭的用电负荷数据。以每个电表每10分钟抄表1次计算， 3500万智能电表每年产生1.8万亿次抄表记录和600TB压缩前数据； 3500万智能电表每天产生5亿次抄表记录和大约2TB的抄表数据。