使用MongoDB存储爬取数据.pdfVIP

将爬取的文章到MongoDB

关于数据的有很多选择，最简单的方式就是直接保存到CSV文件中，

这种方式操作简单，适合数据量少的情况，Python的库csv模块就

可以直接支持。如果遇到数据量非常大的情况，就必须要用到专业的数据

库系统，你既可以使用MySQL这样的关系型数据库，也可以使用

MongoDB一类的文档型数据库。用Python操作MongoDB非常方便，无

需定义表结构就可以直接将数据，所以在这一节采用MongoDB来存

储数据。

MongoDB安装

MongoDB目前版本是3.6，在地

址

()

选择相应平台安装。

Windows默认安装在C:\ProgramFi\MongoDB\Server\3.6\，

macOS也可以直接通过brew命令安装，Linux平台直接压缩包

解压即可。

将爬取的⽂章到MongoDB

关于数据的有很多选择，最简单的⽅式就是直接保存到CSV⽂

件中，这种⽅式操作简单，适合数据量少的情况，P