云计算、大数据与慧城市建设.pptVIP

大数据生态:软件是引擎 大数据的应用不仅仅是精准营销 通过用户行为分析实现精准营销是大数据的典型应用，但是大数据在各行各业特别是公共服务领域具有广阔的应用前景 消费行业 金融服务 食品安全 医疗卫生 军事 交通环保 电子商务 气象 管理大数据“易”,理解大数据“难” 目前大数据管理多从架构和并行等方面考虑，解决高并发数据存取的性能要求及数据存储的横向扩展，但对非结构化数据的内容理解仍缺乏实质性的突破和进展，这是实现大数据资源化、知识化、普适化的核心. 非结构化海量信息的智能化处理：自然语言理解、多媒体内容理解、机器学习等. 大数据相关技术 数据处理：自然语言处理技术 统计和分析：A/B test; top N排行榜；地域占比；文本情感分析 数据挖掘：关联规则分析；分类；聚类 模型预测：预测模型；机器学习；建模仿真 分析技术 大数据技术 数据采集：ETL工具(数据提取、转换和加载) 数据存取：关系数据库；NoSQL(非关系型数据库)；SQL等 基础架构支持：云存储；分布式文件系统 （Distributed File System）等 计算结果展现：云计算；标签云；关系图等 大数据相关技术 存储 结构化数据： ? 海量数据的查询、统计、更新等操作效率低 非结构化数据 ? 图片、视频、word、pdf、ppt等文件存储 ? 不利于检索、查询和存储 半结构化数据