A12数据采集工具.pdfVIP

前言 现在互联网上有这么多的采集器，我们为什么要开发爬山虎 呢？原因很简单，大部分已有的软件用起来不爽，于是我们 就自己开发了一个。 特性 爬山虎采集器是一款全新的网页数据采集工具。作为一款工 具软件，我们： 1. 放弃了花哨的界面，换之以快速流畅的体验。 2. 放弃了复杂的规则配置，开发了智能的自动提取算法。 3. 在基于浏览器的可视化操作上，同时保留了快速的 HTTP 引擎架构。 爬山虎采集器在保持了用户体验、用户低学习成本的同时， 兼顾了软件的数据抓取效率。 数据采集 爬山虎采集器能够采集互联网上的绝大部分网页，比如动态 网页、静态网页、单页程序、表格数据、列表数据、文章数 据、搜索引擎结果、下载图片等等。 发布数据 在采集到数据后，还可以发布到 CSV、Excel、MySQL、SQLite、 Access 、MSSQL、以及网站 API 接口上。 当然爬山虎采集器作为一个新上场的选手，跟前辈们相比， 可能会有些缺点、问题。 欢迎您下载试用，并且给我们提供宝贵的意见。（如果你懒 得下载，可以看下网站首页的演示视频：） 爬山虎采集器网站 采集功能： 可自动分析网页结构，自动提取数据。还有可以自动识别分页。支持下载图片、文件。对 于复杂的页面，可以深入采集多级页面，灵活配置。 新版增加的功能： 1. 增加了采集前执行脚本命令功能，对于一些单页程序，可以自动填写表单，点击，运 行JS 代码。 2. 增加了瀑布流分页，针对类似微博、今日头条这种瀑布流网页，采集非常方面，不用 自己去分析抓包。 关于免费版本： 目前免费版能够导出txt 1 千条/每天，我觉得应该足够一般用户使用。 除此，还有一些高级功能限制，比如： 增量更新、下载文件、计划任务、自定义屏蔽请求