第四章网站结构优化(二).pptxVIP

网站结构优化（二）SEO搜索引擎优化上节课的内容：搜索引擎友好的网站设计避免蜘蛛陷阱物理及链接结构清晰导航子域名和目录目录/ Content禁止收录机制URL设计及网址规范化复制内容网站地图内部链接及权重分配404页面目录/ Content禁止收录机制URL设计及网址规范化复制内容网站地图内部链接及权重分配404页面禁止收录机制某些页面站长并不希望被收录：禁止收录机制确保网页不被收录：robots.txt 文件meta robots标签a 标签的 nofollow 属性robots.txt 位于网站根目录的纯文本文件，用于指示搜索引擎禁止抓取网站某些内容或指定允许抓取某些内容。但是，如果有链接导向被禁止的抓取的页面，其URL还是可能出现在搜索结果，不同搜索引擎处理方法不同。禁止收录机制robots不存在或为空都表示可以抓取所有内容。建议就算允许抓取所有内容，也要建一个空的robots.txt文件。robots文件由一条条的记录组成，记录之间使用空行分隔。格式如下：域:可选空格域值可选空格例：http:////robots.txt文件名、内容区分大小写禁止收录机制robots.txt （详细参见 练习/robots文件用法/robots.txt文件的用法.docrobots.txt练习/robots文件用法/robots.txt文件的用法.doc文件写法练习/robots文件用法/robots.txt文件的用法.doc.doc）$ 通配符，匹配URL结尾字符User-agent:BaiduspiderAllow:.htm$允许百度蜘蛛抓取以htm为后缀的URL*通配符，匹配任意个字符User-agent:*Disallow:*.htm禁止所有蜘蛛抓取htm文件禁止收录机制meta robots标签：对页面上的所有内容及链接设定是否允许抓取、跟踪使用它可以禁止索引，标签不区分大小写meta name=“robots” content=“noindex,nofollow”禁止索引，禁止跟踪本页面上的所有链接meta name=“robots” content=“noindex”不允许索引，但允许跟踪页面的链接，可以传递权重禁止收录机制nofollow属性：仅对某一个链接设定是否允许跟踪，告诉蜘蛛这不是站长自己编辑的，不具备信任度。a href=“” rel=“nofollow”用于博客、论坛的帖子、回复，联系我们、用户条款、登陆等。关于nofollow的争议？目录/ Content禁止收录机制URL设计及网址规范化复制内容网站地图内部链接及权重分配404页面URL设计URL设计应该考虑的问题：URL越短越好字母全部小写避免太多参数URL静态化URL设计文件及目录名具有描述性目录层次尽量少URL设计URL静态化例：LAMP（Linux+Apache+MySQL+PHP）服务器配置:启用mod_rewrite模块，如果想把URL： /products.php?id=123静态化为： /products.php/123则在.htaccess文件中写入如下代码：RewriteRule /products.php/([0-9]+) /products.php?id=1遵循正则表达式书写规则URL设计网址规范化，试比较以下网址/index.html/:80实际上是同一个页面！搜索引擎感到困惑URL设计解决网址规范化问题：所有内部链接保持统一，都指向规范化网址设置首选域（google 站长、百度使用rewrite）使用301转向 （主机后台管理、或使用rewrite）使用canonical标签提交给搜索引擎的XML地图全部使用规范化网址表示网址永久转移到另一个地址，搜索引擎对所有可疑转向都很敏感，只有301转向可以传递权重自己探索：使用.htaccess文件设置301转向URL设计解决网址规范化问题：所有内部链接保持统一，都指向规范化网址设置首选域使用301转向使用canonical标签提交给搜索引擎的XML地图全部使用规范化网址在 products.php？item=fishtid=12sid=789 网页的head头部加上：link rel=“canonical” href=“products.php?item=fish”目录/ Content禁止收录机制URL设计及网址规范化复制内容网站地图内部链接及权重分配404页面复制内容复制内容的害处：搜索引擎误判，对原创页面是惩罚同一个网站内的复制内容会分散权重在权重不高的情况下挤占原创内容的收录机会搜索引擎产生怀疑，进行惩罚解决办法：一个页面只有一个URL使用robots文件禁止抓取使用noindex meta robots禁止索引使用canonical标签目录/ Content禁