大数据及其在城市规划中的应用详解.ppt

* * * * 大数据 BIG DATA 深入 认知 初识 大数据在城市交通研究中的应用 大数据在城市空间研究中的应用 大数据在城市研究中的应用 大数据的基本概况 “大数据”学习路线 【LEARNING PROCESS】 大数据的基本概况 1 大数据的定义 1.1 城市规划中的新兴数据 1.2 CONTENTS CONTENTS 大数据的定义 1.1 “大数据”这个术语最早期的引用可追溯到apache org的开源项目Nutch。 当时，大数据用来描述为 更新网络搜索索引需要同时进行批量处理或分析的大量数据集。 2004年 1.1.1大数据定义主要发展变化时间轴 美国咨询公司麦肯锡在其研究大数据的报告中定义：大小超出常规的数据库工具获取、存储、管理和分析能力的数据集。 (参考：Big data: The next frontier for innovation, competition,and productivity) 大数据不是一个精确的术语，它是对无穷尽的各种类型数据积累的描述。? （参考：Making sense of Big Data[M]. Technology forecast, A quarterly journal ,2010） 2010年 1.1 大数据的定义 【CONCEPT】 2011年 大数据：下一个创新、竞争、生产的先驱 在维克托·迈尔·舍恩伯格及肯尼斯·库克耶的《大数据时代》中，大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数据的方法。 (参考：Big Data: A Revolution That Will Transform How We Live, Work, and Think) 维基百科中定义到：“巨量资料(big data)，或称大数据，指所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理并整理成为帮助企业经营决策更积极目的资讯。 1.1.1大数据定义主要发展变化时间轴 1.1 大数据的定义 【CONCEPT】 2012年 2014年 美国研究机构定义到：大数据是基于新的处理模式而产生的具有强大的决策力、洞察力以及流程优化能力的多样性的、海量的且增长率高的信息资产。 （参考：Hype Cycle for Big Data,2012） Volume 数据体量巨大。包括采集、存储和计算的量都非常大. Variety 数据类型繁多。包括网络日志、音频、视频、图片、地理位置信息等，对数据处理能力有高要求。 Velocity 处理速度快，时效性要求高。这是区分于传统数据挖掘最显著的特征。 Veracity/Value 价值密度低，商业价值高。信息无处不在，但价值密度较低，如何精准通过数据价值“提纯”是关键。 1.1 大数据的定义 【CONCEPT】 1.1.2基于大数据特征的定义归纳 对于大数据尚未有一个公认的定义，然而大多数不同的定义基本是从大数据的特征出发，通过这些特征的阐述和归纳试图给出其定义。 3V定义：规模性（volume）、 多样性（variety）、 高速性（velocity）。 4V定义：价值性（value）/ 真实性（veracity）。 CONTENTS 城市规划中的新兴数据 1.2 1.2 城市规划中的新兴数据 1.2.1常见新兴数据类型 大数据的出现不仅为科学、商业、教育等领域带来变革，也为城市规划行业的数据研究开辟了新世界。 常见规划新兴数据大致可分为：感知数据、政府公开数据、互联网数据、开放地图数据、移动通信数据等，如图1.1。 李乐，张恒，孙保磊，李刚.大数据在城市规划中的应用研究[R].天津：天津市城市规划设计研究院，2015. 传统规划数据类型 各类型常见具体数据例举 遥感测绘数据 如电子地图、航拍影像图、卫星遥感数据、地形图、建筑 模型、地下管网数据等 统计数据 如社会、经济、人口等统计年鉴数据 调查数据 如规划现场踏勘数据集 知识数据 如论文期刊、规划案例、会议讲座、电子图书、照片视频等 规划成果数据 如总规、控规、专项规划成果等 业务数据 如规划院行政管理数据、各委办局专业数据等 表1.1 传统规划数据常见类型 图1.1 城市规划新兴数据常见类型 【EMERGING DATA 】 1.2 城市规划中的新兴数据 1.2.2新兴数据的特征 基于传统规划数据与新兴数据的对比，我们可以浅析城市规划行业新兴数据的特征优势： 两者在数据来源、体量范围、时效性等方面具有很大的差异（如表1.2所示）。 李乐，张恒，孙保磊，李刚.大数据在城市