第6章_物联网数据处理重点.ppt

物联网工程概论 第五讲内容安排 后台数据库技术 数据库概述 关系型数据库 SQL查询语言 资源受限网络的分级数据融合 节点的分簇控制 簇内数据融合 分布式数据存储与处理 数据挖掘与海计算 数据仓库与数据挖掘技术 云计算概述 海计算的概念与未来 第五讲内容安排 后台数据库技术 数据库概述 关系型数据库 SQL查询语言 资源受限网络的分级数据融合 节点的分簇控制 簇内数据融合 分布式数据存储与处理 数据挖掘与海计算 数据仓库与数据挖掘技术 云计算概述 海计算的概念与未来 物联网数据处理 物联网中的个体通过感应器来感知信息，然后通过中间传输网来传送信息，最后在数据处理中心进行智能处理和控制。 随着物联网技术的广泛应用，我们将面对大量异构的、混杂的、不完整的物联网数据。在物联网的万千终端收集到这些数据后，如何对它们进行处理、分析和使用成为物联网应用的关键。 本讲对物联网中的后台数据库技术、数据挖掘技术和云计算与海计算技术逐一介绍。 后台数据库技术 数据库是一项专门研究如何科学地组织和存储数据、如何高效地获取和处理数据的技术。 主要内容： 数据库的基本概念 关系型数据库 SQL查询语言 数据库概述 1.数据库相关的基本概念 数据（Data）是描述事物的符号记录，数字、文本、声音和图像等都是数据。数据有多种表现形式，它们都能数字化后存入计算机，数据是数据库中存储的基本对象。 (1) 数据库 数据库（DataBase， DB）从字面上来看，就是存放数据的仓库，只不过这个仓库是在计算机存储设备上，而且数据是按一定格式存放的。 数据库是指长期存储在计算机内、有组织的、可共享的大量数据的集合。 数据库中的数据按一定的数据模型组织、描述和储存，具有较小的冗余度（redundancy）、较高的数据独立性（independency）和易扩展性（expandability），并可为各种用户共享。 数据库概述 (2) 数据库管理系统 数据库管理系统（DataBase Management System， DBMS）是位于用户与操作系统之间的一层数据管理软件，它允许用户对数据库中的数据进行操作，并将操作结果以某种格式返回给用户。数据库管理系统和操作系统一样是计算机的基础软件，也是一个大型复杂的软件系统。 数据库管理系统的主要功能如下： ① 数据定义功能 ② 数据组织、存储和管理 ③ 数据操纵功能 ④ 数据库的事务管理和运行管理 ⑤ 数据库的建立和维护功能 ⑥ 其他功能：通信功能、数据转换功能、异构数据库之间的互访和互操作的功能等。 数据库概述 (3) 数据库系统 数据库系统（DataBase System，DBS）是指一个采用数据库技术的计算机存储系统。 广义地讲，数据库系统是由计算机硬件、操作系统、数据库管理系统以及在它支持下建立起来的数据库、应用程序、用户和维护人员组成的一个整体。 狭义地讲，数据库系统由数据库、数据库管理系统和用户组成。需要指出的是，数据库的建立、使用和维护等工作只靠一个DBMS远远不够，还需要专门的人员来完成，这些人员被称为数据库管理员（DataBase Administrator， DBA）。 数据库概述 数据库概述 2. 数据管理技术的产生与发展 数据库技术是应数据管理任务的需要而产生的，数据管理则是对数据进行分类、组织、编码、存储、检索和维护，它是数据处理的中心问题。数据处理是指对各种数据进行收集、存储、加工和传播的一系列活动的总和。 在应用需求的推动下和计算机硬件、软件发展的基础上，数据管理技术经历了三个阶段: 人工管理 文件系统 数据库系统 数据库概述 数据库技术从20世纪60年代中期产生到现在仅仅50余年的历史，但其发展速度之快、使用范围之广是其他技术所不及的。 60年代末出现了最早的数据库——层次数据库，随后在70年代出现了网状数据库，在此阶段层次数据库和网状数据库占据了商用市场主流。 在70年代同时出现了处于实验阶段的关系数据库，后来，随着计算机硬件性能的改善，关系系统的使用简便，关系数据库系统已逐渐替代了网状数据库和层次数据库，成为当今最流行的商用数据库系统。 20世纪90年代，由于计算机应用的需求，数据库技术与面向对象、网络技术相互渗透，对象数据库技术和网络数据库技术得到了深入研究。 数据库概述 数据库概述 3. 数据库系统的特点 数据库是在计算机内按照数据结构来组织、存储和管理大量共享数据的仓库，它可以让各种用户共享，并具有最小冗余度和较高的数据独立性。 DBMS在数据库建立、运用和维护时对数据库进行统一控制，以保证数据的完整性、安全性，并会在多用户同时使用数据库时进行并发控制，在发生故障时对数据