火车采集器V9-火车头采集器.PDF

最受欢迎的网页数据采集软件 火车采集器V9 产品白皮书 合肥乐维信息技术有限公司 2015年9月 最受欢迎的网页数据采集软件 目录 一、 引言3 1.1文档主题3 1.2适用范围3 1.3相关术语3 二、 火车采集器的研发背景4 2.1从搜索引擎到网页数据采集4 2.2从手动采集到软件采集4 三、 火车采集器综述4 3.1火车采集器简述4 3.2功能详述4 3.2.1网址采集5 3.2.2 内容采集5 3.2.3数据处理5 3.2.4数据发布5 3.2.5多任务多线程运行6 3.2.6 HTTP二级代理服务器6 3.2.7计划任务管理器6 3.2.8任务运行日志管理6 3.2.9插件扩展6 3.3版本介绍6 四、 火车采集器的特性7 4.1全网通用7 4.1.1基于web结构的采集7 4.1.2扩展性强7 4.2功能全面7 4.2.1集采集发布于一体7 4.2.2多元化的功能配置7 4.3高效稳定8 4.3.1分布式高速采集系统8 4.3.2 占用资源少8 4.4数据精准8 4.4.1采集监控系统8 4.4.2数据处理准确8 五、 火车采集器的典型应用8 1 最受欢迎的网页数据采集软件 5.1使用群体及运用8 5.1.1企业人员8 5.1.2 电商运营8 5.1.3政府机关8 5.1.4网站站长9 5.1.5个人需求者9 5.2应用案例9 六、运行环境9 6.1系统环境9 6.2框架支持9 七、火车采集器技术支持10 2 最受欢迎的网页数据采集软件 一、引言 1.1文档主题 合肥乐维信息技术有限公司是国内最早从事互联网数据服务的企业之一，多 年来专注于互联网数据采集领域，面向国内外的广大用户提供技术支持与服务。 目前拥有超过十万的合作客户，其中包括政府机构和众多知名企业。乐维公司一 直秉承着为客户节约成本，提升价值的服务理念，做客户最值得信赖的合作伙伴。 由合肥乐维信息技术有限公司自主研发推出的核心产品——火车采集器，是 一款能够高效采集网页数据的采集软件。火车采集器作为国内使用人数最多的网 页数据采集产品，曾多次被网易新闻、电脑报、安徽商报等知名媒体报道，备受 业界关注。软件通过对网页数据的提取，处理，发布等操作，使网页数据的提取 利用变得简单便捷，能够显著提升使用者的工作效率。 本文档就火车采集器的研发背景、产品