爬虫试题及详细答案.docxVIP

爬虫试题及详细答案

一、选择题（每题5分，共30分）

下列哪个不是Python中常用的爬虫库？（）

A.requestsB.BeautifulSoup4C.scrapyD.pandas

爬虫获取网页数据时，最基础的HTTP请求方法是？（）

A.POSTB.GETC.PUTD.DELETE

下列哪种反爬机制是通过验证浏览器身份实现的？（）

A.IP封禁B.robots协议C.User-Agent验证D.验证码

使用BeautifulSoup解析网页时，下列哪个方法可以根据标签名获取所有匹配的标签？（）

A.find()B.find_all()C.select()D.get()

关于Scrapy框架，下列说法错误的是？（）

A.Scrapy是一个异步爬虫框架B.Scrapy自带数据解析功能

C.Scrapy不能处理JavaScript渲染的页面D.Scrapy可以自定义中间件

下列哪种方式不能有效应对IP封禁反爬？（）

A.使用代理IPB.降低请求频率C.固定一个IP持续请求D.模拟浏览器行为

二、填