高教社旅游大数据理论、技术与应用教学课件5.pptxVIP

【第5章】 旅游大数据存储与管理 导读 第1节 旅游大数据存储 第1节 旅游大数据存储 一、不同类型数据存储：数据管理技术发展经历了4个阶段 项目 人工管理阶段 文件系统管理阶段 关系型数据库主导阶段 NoSQL崛起阶段 时间 20世纪50年中期以前 20世纪50年代后期到60年代中期 20世纪60年代后期到21世纪10年代中期 21世纪10年代后期至今 主要技术背景 硬件方面无直接存取的存储设备,软件方面没有操作系统 硬件方面有磁盘、磁鼓可以存取数据，软件方面已有文件系统 硬件上大容量磁盘、磁盘阵列等提高存取容量和性能，软件方面关系型数据库管理系统日趋成熟 以云计算、物联网、大数据等为代表的新一代信息技术蓬勃发展，互联Web 2.0网站兴起 主要应用背景 科学计算 科学计算、数据存储和管理 大规模数据存储和管理、查找和排序等是数据应用的重点 海量数据存储和管理、机器学习等数据应用日益广泛 第1节 旅游大数据存储 （一）旅游数据的文件存储 1.Excel文件 2.其它文件 CSV XML Json 思考：文件存储的不足之处？ 第1节 旅游大数据存储 （二）关系型数据库存储旅游数据 1.关系模型认为数据库是关系的集合 2.数据库管理系统(DBMS) Oracle MySQL 其它关系型DBMS 注意：关系数据库已经广泛应用于包括旅游在内的各个领域，是绝大多数应用的必选解决方案。 第1节 旅游大数据存储 （三）非关系型数据库存储旅游数据 思考：NoSQL与关系型数据库有哪些不同的设计理念？ 第1节 旅游大数据存储 二、大数据存储方式 （一）传统数据存储方式面临的挑战 数据量的激增 数据类型的多样化 数据价值的需求 讨论：数据管理技术发展经历了4个阶段与这些挑战有什么内在联系？ 第1节 旅游大数据存储 （二）数据存储架构 思考：分布式系统具有哪些优势特征？ 了解：去“IOE”运动 讨论：OLTP和OLAP的区别与联系 第1节 旅游大数据存储 （二）数据存储架构（续） 讨论：数据仓库是不是数据库？ 思考：大数据平台和数据中台分别针对哪些问题提出解决思路？ 第1节 旅游大数据存储 三 、旅游业的大数据应用 引入先进的大数据技术不仅将帮助旅游业进行数据整合，也为旅游业的数据分析奠定基础。 大数据技术正为旅游业高质量发展提供支持。 层出不穷的大数据技术被应用于旅游数据分析。 讨论：除了书中列举，大数据技术还能解决旅游行业的哪些痛点？ 第2节 旅游大数据的共享和管理 第2节 旅游大数据共享和管理 一、旅游大数据共享 目前在旅游大数据领域主要的数据共享方式包括: 一是通过文件传输协议（如FTP、SFTP）等方式将一个组织的数据共享给其它特定组织； 二是通过开放数据接口，将一个组织的数据开放给外部； 三是通过数据共享平台，在一个组织内部的不同部门之间共享数据。 第2节 一、旅游大数据共享（续） （一）旅游大数据共享现状 （二）旅游大数据共享面临的挑战 （三）旅游大数据共享的趋势 知识拓展：文件传输协议、网络爬虫、区块链 讨论：有人说旅游大数据“分久必合合久必分”，你是怎么看待这个问题的？ 旅游大数据共享和管理 第2节 二、旅游大数据管理 （一）数据管理的架构 （二）数据管理的策略 （三）数据管理的保障 知识拓展：数据资产、透明性、容错性、事务、隐私管理 旅游大数据共享和管理 讨论：在旅游大数据管理中，非技术因素有哪些？技术因素和非技术因素是如何相辅相成的？