了解蜘蛛 提高网站收录.doc

了解蜘蛛 提高网站收录 蜘蛛是搜索引擎的一个自动程序，它的作用是访问互联网上的HTML网页，建立索引数据库，使用户能在百度搜索引擎中搜索到网站的网页。简单的说，它是网站与搜索引擎交流的工具，正是有了蜘蛛，搜索引擎才能知道你的站点，进而才产生了收录和排名。因为蜘蛛是一个自动程序，依靠各项设定的规则来行动，所以通过跟踪蜘蛛的动向和搜索引擎的反应，就可以有的放矢的对网站进行优化。 1.新站上线吸引蜘蛛 网站上线后，首先向搜索引擎提交页面。搜索引擎会分析出其中含有的链接，然后进行爬行，由于是新站，所以在提交之后，蜘蛛的反应也不会很快，一次可能只抓取一两个页面就走，等到下次来继续抓取页面。 Google提交地址百度提交地址在网站初期有一个特别需要注意的问题，那就是网站不能有死链坏链，并且要保证网站服务器的稳定，也就是说一定要给蜘蛛营造一个好的爬行环境，因为蜘蛛一旦碰上死链就会直接走掉.如果网站服务器不稳定，可能蜘蛛转一圈，一个页面还没有抓取就迫不及待的走了。我们还要保证新站的内部链接有层次，保证蜘蛛能够更好的抓取内容，对于用户的浏览也方便的多。 新站建立初期，友情链接的作用还是很大的，它可以大大增加蜘蛛在新站的爬取次数，可以一定程度上缩短网站的收录时间。新站上线时，数据不能太少，要有足够的数据，同时内部链接要合理，这样才是一个成型的站点，蜘蛛爬取时对于这个站点的印象分才会很高。 一般新网站在百度的收录时间大概在半个月左右，而Google蜘蛛在网络上爬行的比百度蜘蛛更加频繁，可能2天只能就收录了新文章。 2.查看蜘蛛足迹 在搜索引擎对网站的收录进入稳定阶段时，有一个小诀窍可以增加百度蜘蛛的爬行次数。每天的更新内容不要一次更新完，可以2个小时更新一部分或者分批进行更新。 因为在这个阶段，有一部分的百度蜘蛛是通过首页进入的，一旦发现首页没有变化就离开。这样定时定量更新的好处就显现出来了，蜘蛛进入首页一次发现首页变动一次，爬行的当然就更加频繁了。同时，多注意蜘蛛爬行的时间段，在这个时间段内进行更新，收录的速度是最快的。 这就需要一款可以随时查看蜘蛛动向的工具了，很多CMS都具备这样的功能，能够很清晰的记录各个大型搜索引擎的机器人痕迹，包括停留时间，爬行过的页面等都有详细数据，可以对每日爬行进行分析，或者对比几个栏目哪个爬行的次数最多。 熟悉的掌握蜘蛛对网站爬行的时间规律和蜘蛛比较喜爱爬行的栏目，都可以很好的帮助站长提高收录数量和收录速度，同时也可以从侧面对比出那个频道的权重比较高。 八、巧妙加快网页显示速度 网站显示速度不仅与网站的服务器有关，网页的页面设置、代码引用也会对网页加载速度产生很大的影响，如何加快网页的显示速度，增强用户的浏览体验，下面就从检测页面加载时间入手，再介绍加快网页显示速度的方法。 1.巧用插件检测页面加载时间 直接通过浏览器访问可以直观的看出网站的加载速度，但是浏览网站的网络环境各不相同，如果网站加载了较多特效，对于带宽较小的用户来说，很可能对浏览造成影响。要详细的了解站点的加载速度，可以通过检测网页加载时间的插件YSlow,它是一款Mozilla Firefox的扩展程序(下载地址：https：///en-US/firefox/addon/5369. 插件安装完成后打开待检测的网站，当网页完成加载以后，就可以看到一项统计数据数字，这里就是该网页加载所用的详细时间数据了。 2.小改进让网页显示速度变快 使用Gzip压缩文档：GZIP编码是用来改进网页性能的方法，不仅可以减小存储空间，还可以减少传输所需的时间。将网站中的文件使用Gzip压缩后，可以显着的增加网页加载速度，同时也可以降低网站的带宽流量消耗。 将样式表文件放在外部调用：把页面中需要用到的JavaScript和CSS样式表文件放在另外的文件夹中，这样一来在打开网站其它页面时就会缓存这些调用的文件，从而加快网站页面的加载速度。 图12 CSS直接写在网页中会增加页面大小 避免使用网页重定向：无论是通过服务器端重定向或者JavaScript代码进行内容重定向。网站都会首先加载一个空白的页面，然后在定向到另外的页面，这样不仅延长了页面的加载时间，还很有可能导致无法跳转，让用户面对一个空白页面。 清除重复多余的脚本：浏览器加载相同的网页脚本会增加页面的加载时间，但是很多程序都会有这种简单的错误出现。现在就看看网站中有没有调用两次或三次jQuery或者其他的脚本吧。 减少域名DNS查找时间：用户在浏览器的地址栏中键入域名后，浏览器就会通过DNS系统查找域名对应的IP地址，随意需要将DNS的时间设置在较低的水平，比如平均60-100毫秒进行一次DNS查询。 给JavaScript文件减肥：这个方法不同于gzip压缩功能，缩小JavaScript文档有很多方法，比如去除不必要