大数据技术与应用 第2版 课件 第1章 大数据介绍；第2章 大数据架构.ppt

大数据与人工智能的区别第一，在概念上两者有所不同，大数据和云计算可以理解为技术上的概念，人工智能是应用层面的概念，人工智能的技术前提是云计算和大数据。第二，在实现上，大数据主要是依靠海量数据来帮助人们对问题作出更好的判断和分析，而人工智能一种计算形式，它允许机器执行认知功能，例如对输入起作用或作出反应，类似于人类的做法，并能够替代人类对认知结果作出决定。大数据是一个事关我国经济社会发展全局的战略性产业，大数据技术为社会经济活动提供决策依据，提高各个领域的运行效率，提升整个社会经济的集约化程度，对于我国经济发展转型具有重要的推动作用。大数据的意义从国家层面上讲，大数据在推动中国经济转型方面也将发挥重要作用。其一，通过大数据的分析可以帮助解决中国城镇化发展中面临的住房、教育、交通等难题。例如，在城市发展中，大数据是“智慧城市”建设中不可或缺的组成部分。通过对交通流量数据的实时采集和分析，可以指导驾驶者选择最佳路线，改善城市交通状况。其二，通过大数据的研究有助于推动钢铁、零售等传统产业升级，向价值链高端发展。其三，大数据的应用可以帮助中国在发展战略性新兴产业方面迅速站稳脚跟，巩固并提升竞争优势。大数据在许多企业应用程序中的确扮演着相当重要的角色，大数据的应用对于企业带来的好处有以下几点：（1）结合各种传统企业数据对大数据进行分析和提炼，带给企业更深入透彻的洞察力。它可以带来更高的生产力，更大的创新和更强的竞争地位。（2）正确的数据分析可以帮助企业做出明智的业务经营决策的工具。这里所谈的数据包括来自企业业务系统的订单、库存、交易账目、客户和供应商资料及来自企业所处行业和竞争对手的数据，以及来自企业所处的其他外部环境中的各种数据。而商业智能能够辅助的业务经营决策既可以是作业层的，也可以是管理层和策略层的决策。?（3）促进企业决策流程：增进企业的资讯整合与资讯分析的能力，汇总公司内、外部的资料，整合成有效的决策资讯，让企业经理人大幅增进决策效率与改善决策品质，很大程度上影响了企业的经营和绩效。大数据已成为驱动经济发展的新引擎，大数据应用范围和应用水平将加速我国经济结构调整、深度改变我们的生产生活方式。可以预见，在“十三五”期间：我国的大数据基础设施建设持续增长。大数据开放共享进度加快。政府大数据深入应用。大数据相关立法加快。大数据与传统产业深度融合。大数据的产业链分析大数据产业链的参与者主要包括：数据提供商（数据源）、基础设施提供商（产生与汇聚层）、分析技术提供商（组织与管理层、分析与挖掘层）和业务应用提供商（应用与服务层）。数据提供商：主要负责基础数据的生成和各方数据段融合。基础设施提供商：主要负责数据库平台的管理和建设，以及云设施的建设。分析技术提供商：主要负责分析技术、分析服务和分析工具的提供，以及数据可视化的实现。业务应用提供商：主要负责大数据的软件开发与应用。大数据的应用本章小结1）大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。2）大数据一般具有四个特征：数据量大、数据类型繁多、数据产生速度快以及数据价值密度低。3）大数据的应用无处不在，从金融业到娱乐业，从制造业到互联网行业，从物流业到运输业，到处都有大数据的身影。4）大数据的关键技术包含数据采集、大数据预处理、大数据存储和大数据分析挖掘。5）按照对所处理的数据形式和得到结果的时效性分类，大数据处理框架可以分为三类：批处理系统、流处理系统和混合处理系统。6）大数据是一个事关我国经济社会发展全局的战略性产业，大数据技术为社会经济活动提供决策依据，提高各个领域的运行效率，提升整个社会经济的集约化程度，对于我国经济发展转型具有重要的推动作用。7）大数据运营是指以企业海量数据的存储和分析挖掘应用为核心支持的、企业全员参与的，以精准、细分和精细化为特点的运营制度和战略。第2章大数据架构大数据架构概述大数据架构是用于于摄取和处理大量数据（通常称为“大数据”）的总体系统，因此可以针对业务目的进行分析。该架构可视为基于组织业务需求的大数据解决方案的蓝图。企业中数据平台的基础架构工业大数据的基础架构使用大数据架构可以帮助企业节省资金并做出关键决策，其中主要包括以下几点：?1）降低成本。在存储大量数据时，Hadoop和基于云计算的分析等大数据技术可以显著地降低成本。?