网络爬虫火车浏览器如何提升脚本稳定性.docxVIP

下载本文档

1
0
约1.19千字
约 4页
2017-05-19 发布于湖南
举报
版权申诉

网络爬虫火车浏览器如何提升脚本稳定性.docx

1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
7、VIP文档为合作方或网友上传，每下载1次，网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

网络爬虫火车浏览器如何提升脚本稳定性

网络爬虫火车浏览器如何提升脚本稳定性我们在使用各种软件时，往往会发现有时软件运行起来很慢，网络爬虫火车浏览器软件的脚本在运行过程中，也像其他软件一样会产生缓存文件，我们可以在脚本中加上清除缓存的步骤，这样可以将缓存文件整个压缩，减少占用的内存。但如果是长时间的运行的话，上述方法就行不通了。下面介绍一种新建内存盘的方法来提升脚本稳定性：（1）使用火车浏览器安装目录下Tools 文件夹中的ramdisk.exe创建一个新的内存盘双击ramdisk.exe ?? ?? ?? ?? ??? INCLUDEPICTURE \d /data/attachment/forum/201506/29/114959jpjtp1ocajv1dfbz.png \* MERGEFORMATINET ? 如上图示，使用内存创建一个指定大小的内存盘，注意内存盘大小限制，不要超过限制的大小，然后点击创建建立一个盘名为Z的内存盘。（2）建立内存盘之后，可指定缓存目录放在该盘中。不同的任务，可以将缓存目录放在不同的文件夹中，这样在加批处理删除文件夹时，可以区分不同的任务来删除文件。否则当多个任务同时运行，而缓存文件放在同一个目录中，一个任务结束便删除缓存，而另一个任务还在运行中，这种命令的运行就会出现冲突。因此不同的任务最好定义不同的文件夹存放缓存。项目管理器指定缓存目录： ? ?? ?? ?? ??? INCLUDEPICTURE \d /data/attachment/forum/201506/29/115040z7caaztkj6appc13.png \* MERGEFORMATINET 生成exe指定缓存目录： ? ?? ?? ?? ???INCLUDEPICTURE \d /data/attachment/forum/201506/29/115112tvfz51db42sv2ow9.png \* MERGEFORMATINET （3）批处理.bat：建立一个以.bat后缀名的文件，比如命名为批处理.bat 其中内容为: ping -n 20?? nulrmdir /q /s d:\s ? 其中d:\s 是要删除的文件夹路径，可按缓存路径填写。（4）批处理文件建立后，再用浏览器的调用外部程序功能调用该文件。这个步骤请添加在脚本的最后一步。 INCLUDEPICTURE \d /data/attachment/forum/201506/29/115146e4jtmcv454x1a11r.png \* MERGEFORMATINET 按上述步骤操作后，在任务运行结束后，自动清除缓存文件以及缓存文件夹。这样我们在使用网络爬虫工具火车浏览器时，其脚本的稳定性就可以得到大幅提升，提高工作效率。