大数据淘金利器：桌面空间数据挖掘与统计工具 iDesktop.pdfVIP

大数据淘金利器 桌面空间数据挖掘与统计工具 iDesktop 胡辰璞 超图研究院 产品总监 2017年8月25 日 P1 iDesktop的大数据：用户区域分布 地图预览 P2 SuperMapOnline大数据：服务调用地点 P3 大数据的好多 “V” 挖掘工具 要求高 价值密度低 Value 种类多 变化快 Variety Velocity 挖掘性能 体量大 要求高 Volume P4 大数据挖掘，就是… 知识的应用 智慧 预测未来 (Wisdom) 知识 (Knowledge) 组织化的信息 信息(Information) 加工处理后 有逻辑的数据 数据(Data) 原始素材 DIKW金字塔 P5 P6 在犯罪发生前未 卜先知 79% 67% 盗窃罪 暴力犯罪 P7 数据挖掘应该具备的技能 1. 数据挖掘常用模型 ：如 SVM、随机森林、 GBM 请给我一套 2. 对主流的应用模型有较好的理解和运用 ， 万能工具！ 如集成学习算法等 3. 掌握模型原理的而不仅仅是调参数 ！ 4. 至少掌握一门编程语言 ，包括但不局限 ： C/C++,JAVA,PYTHON,R等 （matlab除外 ） 5. 熟悉数据库以及SQL ，掌握常用的ETL技能 6. 熟悉hadoop ，SPARK等分布式工具 ！ 7. 不错的英文阅读能力 ，否则无法提高和培养 8. 熟悉Linux常用命令数理统计