顾学明：也谈大数据-地理信息生产流程整合和应用.pptxVIP

也谈大数据--地理信息生产流程整合和应用 顾学明 甲骨文空间信息应用咨询顾问 WGDC2018 Copyright © 2016, Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal 空间地理信息生产组织和管理挑战 . 烟囱式信息采集和数据处理 – 重复工作，重用性差 – 更新周期长 – 产品间一致性 . 增量维护和生命周期管理 – 不同时间，不同版本 – 中间成果的有效管理 . 不同比例或产品关联 – 要素级别的更形传递 – 更新范围或内容的相关性 产品分发 产品制作处理 数据采集更新 WGDC2018 应用开发和管 理 信息服务和发布 产品和成果管理 档案管理 Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal 生产规划和管理 地理信息整合整合和应用 • 政府机构整合 • 企业业务整合 • 基于GIS和IoT的创新 中华人民共和国中央人民政府 一、关于国务院组成部门调整 （一）组建自然资源部。为统一行使全民所有自然资源资 产所有者职责，统一行使所有国土空间用途管制和生态保 护修复职责，着力解决自然资源所有者不到位、空间规划 重叠等问题，实现山水林田湖草整体保护、系统修复、综 合治理，方案提出，将国土资源部的职责，。。。。 WGDC2018 Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | . 数据处理和清理 – 数据处理 . 数据提取ETL . 分析转换 . 投影变换 – 栅格处理 . 影像纠正匀色和镶嵌 . 栅格代数 – 空间数据治理和清洗 . 质量检查 . 数据碰撞和清洗 . 业务空间化 – 空间数据富集化 . 大规模地址和空间匹配 – 空间聚类和关联 . 空间聚类分析 – 业务分析和空间化表达 . 密度分析 . 交通网络分析 WGDC2018 . 现有的数据库整合 – 数据库的整合和部署 . 多个数据库资源规划 . 弹性设计和整合 . 统一的运行和维护 空间地理整合和应用 Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal Big Data 2014-接触和实践 WGDC2018 大数据你还好吗？ Big Data 2012-钟情 WGDC2018 大数据你还好吗？ • Big Data 2016 Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal WGDC2018 大数据你还好吗？ Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | 大数据你还好吗？ . 反思 – 大数据能不是万能的 – 大数据技术留下了一系列技术堆栈 和思维方式 . 4V+Hadoop+MapReduce+Spark+NLP+AI/ML +R/Matlab? . 返璞归真：大数据（big data），指无法在 一定时间范围内用常规软件工具进行捕捉、 管理和处理的数据集合，是需要新处理模 式才能具有更强的决策力、洞察发现力和 流程优化能力的海量、高增长率和多样化 的信息资产 – 利用大数据技术和思路会帮助我们解 决过去不能解决的问题 . 时间表 - 2014年：“我们的CIO定义了目标 - 用 新的大数据技术取代所有关系数据库”（C） 一家l零售公司 . 时间线 - 2015年：“我们开始实施......过了一段 时间，我们意识到，考虑到我们的技术资源， 这样做几乎是不可能的。 我们不是谷歌，也没 有100位开发人员维护这个解决方案“（C）同 一家零售公司 . 时间线 - 2016：“我们开始考虑混合解决方案， 比如Hadoop或NoSQL等现代大数据技术对传统 技术的补充（而不是取而代之）”（C）还是 这家零售公司 WGDC2018 Copyright © 2017, Oracle and/or its affiliates. All rights reserved. | WGDC2018 大数据你还好吗？ Co