关于百度抓取诊断工具升级？0911.docVIP

您了解百度的抓取诊断工具的升级吗？ 近期，百度站长平台连续出了三个声明，细心的观众或许已经发现，他们分别是在【产品动态】、【站长学院】、【活动沙龙】中，虽然从表现上似乎他们之间并没有什么特别的关联，但是从本质来说，这或许也是一种有目的的教化。帮助站长走向正轨，给站长们灌输官方说明以及束下条条框框的教化。下面文军信息就这一点和大家一起来讨论一下各自的想法。 首先就是抓取频次工具的升级。 1、新增抓取时间数据： 展示百度spider每次抓取网站的耗时，根据该数据站长可以了解spider抓取网站的时长，抓取耗时越短代表网站在访问速度方面的用户体验越好。 文军信息提醒大家注意：抓取耗时数据的更新频次与抓取频次有关，抓取频次较高的站点数据更新相对较快。 文军信息的小伙伴说：网站的相应速度，由此也有了一个更为官方的说法，当然，是针对百度的，如果你的网站相应时间过慢，那么你的网站收录比较慢也就不在话下了。 2、新增抓取状态统计数据： 新增四类抓取状态码统计：第一类：重定向（301, 302等）；第二类、未找到（404）；第三类、服务器无响应（501,502等）；第四类：服务器连接超时。有助于站长更好的了解网站在spider中的抓取状态，更好的管理网站。 文军信息提醒大家注意：这里统计的是Baiduspider每次抓取行为的状态，与网站中该状态页面实际数量不能等同看待。 3、提升了抓取频次工具的响应速度: 加快了使用抓取频次工具调整抓取次数之后的生效时间。 文军信息的小伙伴说：如果你嫌弃你的网站抓取量不够，赶紧来这里玩一玩。 再者，百度关于索引量的再次说明。 百度给了一个分析索引量的思维导图。具体图例如下： 文军信息的小伙伴觉得这个分析思路，很赞。当然，如果你的index出现了问题，最好进行细分，以求出到底是哪里出了毛病。而这个毛病，不只是指索引量变小了，同时也有可能是索引量剧增了。如果你不理解剧增的潜在隐患，不妨看下面几种情况： 1、会不会是网站被黑客攻击后增加了大量垃圾网页 2、会不会是Robost协议出了问题，导致大批保密页面被百度抓取 3、大幅增加的url会不会占用有限的抓取配额，导致重要优质内容未被抓取。 其中尤其是第三点，特别值得引起关注，当然，这里也是存在疑惑的，比如抓取配额具体是个什么概念，如果是个值，那么每个网站的配额应当是多少？会不会随着网站的权重增加而增大？都是一些个值得探讨的问题。