Java爬虫面试题及详细答案（实战向）.docx

Java爬虫面试题及详细答案（实战向）

一、Java爬虫基础面试题

1、日常开发中，Java做爬虫常用的框架和工具类有哪些？各自的适用场景？

参考答案：

我工作中主要使用四类工具，各司其职，覆盖不同爬虫场景：

第一，HttpClient（Apache）。这是最基础的HTTP请求工具，支持GET、POST、文件上传、请求头自定义、超时配置、连接池管理。适合轻量级爬虫、自定义请求逻辑、需要精细控制请求参数的场景，稳定性极强，企业项目使用率最高。

第二，Jsoup。专门用于HTML文档解析，语法和jQuery类似，上手简单，支持DOM选择器、标签过滤、数据清洗。只擅长解析静态HTML，不支持JS渲