天云大数据技术1介绍.pdfVIP

大数据情报平台建设 演讲：冯大志 日期：2013.6 议程 大数据时代及大数据应用 大数据技术与传统技术体系的对比 大数据时代对数据处理的要求 数据价值的再发现 大数据时代及大数据应用 大数据及大数据时代 “这是一场革命，庞大的数据资源使得各个领域开始了量化进程，无论学术界、商 界还是政府，所有领域都将开始这种进程。” ———哈佛大学社会学教授加里 ·金 海量（Volume ） 多样（Variety ） 快速（Velocity ） 个性化描述 家庭信息 生理特征 可移动设备的行为轨迹 车辆位置 重视因果还是相关性 要效率还是要准确 经验主义 ，大师文化，在纷繁复杂的 人类行为活动数据中显得苍白无力， 相对于在已有数据范畴 经济活动和人类活动都是非线性离散 内的准确定位 ，需要思 事件，只有借助科技手段对大量事件 金融往来 现象去归纳寻找发 些客观规律，辅助 考对外部海量行为信息 社交关系图谱 业务人员推理判断。deep learning 的探索与发现。如何引 等非线性的算法可以从大量稀释数据 入外部数据集 ，多元多 价值的海量数据中，“聪明”地学习 样化的数据源和数据结 到事物的相关性。 构 （监控视频、社交媒 体、 手机信令移动轨 个人通信 全数据模式：样本 = 总体 迹等等 ），通过系统快 视频信息 速处理在20％的有效时 目前的云计算平台计算能力的颠覆， 间实现80％的准确性 ， 提供了对全数据集的实时计算，为刑 一定成本规模前提下有 侦、情报等业务专家提供创新信息化 效扩大监测范围。 工具 纽约警察局利用全量数据作为 制定战略和决策的基础  CompStat ，是COMPuter STATistics （计算机统计）的缩写，现在已经演变 为专有名词，特指一种警务模式  案件发生在哪里警察就出现在哪里，是 让罪犯牵着鼻子跑；要控制局面，抓到 老鼠，警察一方必须掌握主动，做一只 有”预测能力”的猫  地图上的原点不分案值大小、案情轻 重，一律同等对待  珍妮特（美国第一位女司法部长）大力 推行“数据