时空大数据云计算与智慧城市3.pdfVIP

时空大数据、云计算与智慧城市 陈荣国 中国科学院地理科学与资源研究所 资源与环境信息系统国家重点实验室 2016.04 SDB Group 1 报告提纲 1 大数据 2 时空数据 块数据 3 4 云计算 5 智慧城市 SDB Group 2 一、大数据 SDB Group 3 时代变迁 - 大数据时代  机械化时代：以蒸汽机、内燃机的发明为驱动，释放化学能替代肌肉的能 量，用机械力解放了人力畜力，引发了工业革命，引起了社会变革，改善 了人们生活。  电气化时代：以发电技术、输电技术、电器技术的发明为驱动，释放了能 量的空间限制，让能量能高速高效地聚集和转移，让机械化应用从工厂转 移到了千家万户。  信息化时代：以计算机技术的发明为驱动，让信息和知识能高效、高速传 输和传播，信息/知识成了社会的主要财富，信息/知识流成了社会发展的 主要动力，让产业结构正在实现制造经济向信息经济的转化，改变了人们 的生产和生活方式。  大数据时代？？：分布式存储、移动计算、深度学习。更广的数据采集， 更细的数据加工，使得数据应用革命性地繁荣。机器自动产生大量的数据 SDB Group 4 大数据特征（4V） 1. Volume：海量的数据规模，PB ~ EB 2. Velocity：快速的数据流转和数据处理体系 3. Variety：多样的数据类型：结构化、半结构化、非结构化 4. Value：价值密度低，商业价值高 结构化数据：可描述为二维表格的数据，用SQL管理 半结构化数据：非关系描述的其他结构化数据，如XML、 HTML、EML等 非结构化数据：如图片、音频、视频等 SDB Group 5 大数据内涵 大数据仅是数据本身吗？ 还是技术？ 系统？或 应用？ （1）百度百科： 大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到 无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理、并 整理成为帮助企业经营决策更积极目的的资讯。 （2）维基百科： 大数据，或称巨量数据、海量数据、大资料，指的是所涉及的数据量规 模巨大到无法通过人工，在合理时间内达到截取、管理、处理、并整理 成为人类所能解读的信息。 SDB Group 6 大数据内涵 狭义上，大数据仅是资讯、信息而已 但其内涵涉及到流转、管理、处理、应用等 （1）从对象角度看，大数据是大小超出典型数据库软件采 集、储存、管理和分析等能力的数据集合 （2）从技术角度看，大数据技术是从各种类型的大数据中， 快速获得有价值信息的技术及其集成 （3）从应用角度看，大数据是对特定的大数据集合、集成 应用大数据技术、获得有价值信息的行为 所以认为“大数据”是数据、技术和应用的统一体 SDB Group 7 SDB Group