基于Python的穷游网酒店数据采集与分析.pdf

湖南商务职业技术学院毕业设计

目录

1前言1

1.1项目背景1

1.2开发环境与工具2

1.2.1Python简介2

1.2.2JupyterNotebook简介2

1.2.3数据分析中常见的第三方库3

1.2.4Python网络爬虫3

2需求分4

2.1可行性需求分4

2.2采集目标功能分5

2.3关键技术分6

2.3.1数据预处理技术6

2.3.2文件存取技术6

2.3.3数据可视化技术6

3数据采集6

3.1采集页面分6

3.2字段分7

3.3编程实现9

4数据预处理12

4.1数据清洗与处理13

4.2数据存储13

4.3编程实现14

5数据可视化与分15

5.1准备数据15

5.2展示数据16

5.2.1统计八个热门城市酒店数量16

5.2.2热门城市连锁酒店分布示意图17

I

湖南商务职业技术学院毕业设计

5.2.3价格和用户评论数量示意图18

5.2.4各酒店星级在各城市的占比示意图19

5.3综述19

6小结19

参考资料20

II

湖南商务职业技术学院毕业设计

基于Python的穷游网酒店数据采集与分析

1前言

随着大数据时代的到来，物联网、云计算、互联网金融、物联网、虚拟现

实、人工智能等新兴技术不断渗透并重新塑造传统产业，大数据技术当之无愧

地成为了新时代的产业革命核心。而我们作为信息时代的新青年，正处于大数

据技术迅速发展的时代浪潮中，应当抓住大数据时代带来的机遇和挑战，奋勇

前行，不断创造，走向新生活。

当今时代，中国正处于一个高速发展的新阶段，伴随着互联网技术的全面

普及和移动互联网的不断完善和发展，人们在日常生活中对于互联网的使用需

求日益增加，无论是饮食，穿衣，还是起居，出行等活动，都离不开互联网技

术的支持。生活水平的不断提升，使得中国的人口数量不断增长，日常生活中，

每个人在对互联网的每一次使用过程中都会产生大量的信息数据。巨大的人口

数量产生的大量数据，决定了每个人都正处于一个信息大爆炸的时代。对于大

量数据的产生，用户可以合理的进行利用，通过对数据的采集、清洗、分析以

及可视化等，提取一些有价值的信息。这些信息不仅可以帮助一些企业预测未

来的发展趋势和行为，还可以为企业避免一些不必要的风险和挑战，使得生产

生活更加具有前瞻性和稳定性。对个人来说，这些信息可以根据每个人的兴趣

爱好来推送每个人感兴趣的东西，了解并学习到更多优质的事物，但在一定程

度上也限制了每个人所能接触到的其他层面的内容，把人的思维局限在某些固

定的区域内。

大数据时代是机遇也是挑战，科学技术是第一生产力，任何事物都是有两

面性的。信息时代产生的海量数据，为生产生活带来不少的弊端，但是总的来

说，大数据带来的便利多于其产生的弊端。时代的更迭，社会的不断发展，决

定了大数据技术的应用定会拥有一个光明且灿烂的未来。

1.1项目背景

当今社会，由于人们生活水平的不断提升和对美好生活的向往，人们越来

越注重精神层面的享受，旅游已成为人们提高生活质量的一种方法。且基础建

设不断完善，交通运输的便利，人们对外出旅行的需求也是越来越多。出门旅

游就避