基于豆瓣书评数据分析与挖掘.docx

摘要

PAGEII

PAGEI

摘要

这些年来，随着互联网的高速发展以及新兴技术的不断更新，传统的数据处理方式已经满足不了人们的需求。大数据应运而生，并开始进入人们的生活，大数据在人们的日常生活中处处可见，每时每刻随时随地都能用到大数据。人们生活质量的显著提高，也对业余爱好及对享受生活越来越看重。豆瓣是人们最常用的影评书评的网站，我们正是基于豆瓣书评，通过Python的爬虫技术来爬取豆瓣读书中有用的数据，比如用户的短评，图书的评论数量，图书的作者与出版时间，将数据放入Mysql数据库中，使用SQL语句和pandas库进行数据清洗，将数据导出csv文件，再将文件读入pycha