如何领导蜘蛛到503页面.docVIP

  • 4
  • 0
  • 约3.23万字
  • 约 5页
  • 2017-06-03 发布于河南
  • 举报
如何领导蜘蛛到503页面

向蜘蛛发送 503,其他来访者返回一个 404 页面: ?   Options +FollowSymLinks ?   RewriteEngine On ?   RewriteBase / ?   RewriteCond %{HTTP_USER_AGENT} ^.*(Googlebot|Googlebot|Mediapartners|Adsbot|Feedfetcher)-?(Google|Image)? [NC] ?   RewriteCond %{REQUEST_URI} !^/cgi-bin/error/503\.php [NC] ?   RewriteRule .* /cgi-bin/error/503.php ?   RewriteCond %{REMOTE_HOST} !^1\.1\.1\.1 ?   RewriteCond %{REQUEST_URI} !^/cgi-bin/error/404\.php [NC] ?   RewriteRule .* /under-development-explain.html [R=302,L] ?   如果是单页面,可以先建一个503.php文件, ?   ?php ?   ob_start(); ?   header(HTTP/1.1 503 Service Temporarily Unavailable); ?   header(Status: 503 Service Temporarily Unavailable); ?   header(Retry-After: 3600); ?   header(X-Powered-By:); ?   ?!DOCTYPE HTML PUBLIC -//IETF//DTD HTML 2.0//EN ?   htmlhead ?   title503 Service Temporarily Unavailable/title ?   /headbody ?   h1Service Temporarily Unavailable/h1 ?   pThe server is temporarily unable to service your ?   request due to maintenance downtime or capacity ?   problems. Please try again later./p ?   /body/html ?   把这段代码复制进去就可以了,但切记把所有页面都指向这一个页面,这样做只告知了用户,而没有通知蜘蛛,这样蜘蛛只会以为其他页面被删除了,只剩下这个页面。 ?   第一二句告知搜索蜘蛛网站处理暂时关闭状态,第三句告知搜索蜘蛛,网站将于2012年10月8日18:27从新开放,注意:这里用的是格林威治标准时间。 ?   但是光放一个503信息到服务器里还是不够的,蜘蛛会访问网站不同的页面,因此我们必须引导所有的蜘蛛到503.php这个页面,让蜘蛛知道,整个网站处于临时关闭中,而不是个别页面。 ?   如果站长使用的是Apache/Linux服务器,我们只需在.htaccess设置一下,引导所有的蜘蛛到505.php页面,这里我们要使用302跳转,注意:在这里千万不要使用301跳转,因为301是永久的,在这种情况下会毁灭掉整个网站。 ?   引导蜘蛛到503.php ?   将下面这段代码保存到.htaccess文件,并上传到网站根目录 ?   Options +FollowSymLinks ?   RewriteEngine On ?   RewriteBase / ?   RewriteCond %{REMOTE_ADDR} !^00\.00\.00.\.00 ?   RewriteCond %{REQUEST_URI}!^/503.php [NC] ?   RewriteRule ,* /503.php [R,L] ?   最后一行的[R, 告知蜘蛛,这个是302跳转,属于暂时的。这样我们就完成了网站临时关闭的部署,可以放心关站了! ?   百度站长平台的建议和总结: ?   如果百度spider对您的站点抓取压力过大,请尽量不要使用404,同样建议返回503。这样百度spider会过段时间再来尝试抓取这个链接,如果那个时间站点空闲,那它就会被成功抓取了 ?   如果站点临时关闭或者页面暂未建好上线,当网页不能打开时以及没有建好时,不要立即返回404,建议使用503状态。503可以告知百度spider该页面临时不可访问,请过段时间再重试。 济南网站建设 HYPERLINK / /博兴互联整理,欢迎下载。

文档评论(0)

1亿VIP精品文档

相关文档