一、利用Robots.txt文件优化Z-Blog

独孤天骄一直认为，在整体审查完一个新站之后，首 先应该创建Robots.txt文件， 通过robots.txt语法禁止搜索引擎收录一些不必要的页面，以“清洁”收录，提高质量。在Z-blog中， 诸如评论等页面都是可以禁止搜索引擎收录的，评论和留言页面历来是黒帽SEO的主战场，所以我们第一步就是将它们给清扫了。

大致的语法如 下，大家可以简单参阅，具体怎么使用Robots.txt文件，我们可以看看SEO研究院前面的文章，这里不再赘述：

User-agent:*
#Sitemap
Sitemap:http://www.yourname.com/sitemap.asp //这个是指引搜索引擎蜘蛛找到你的Sitemap。我们可以通过Z-Blog的sitemaps插件自动生成文章的sitemaps，使得搜索引擎能够 有效地抓取网站的链接，同时向搜索引擎尤其是Google递交sitemap可以提升收录速度。很多SEO功能其实我们都可以通过Z-Blog强大的插件 来实现。比如除了使用Robots.txt文件外，我们还可以使用Z-Blog的TotoroⅡ插件来对评论及引用管理进行审核。合理设置Totoro规 则，将有效抵御Z-Blog留言、评论等Spam。
#Directories
Disallow:/ADMIN/ //管理员登陆入口，可以禁止搜索引擎抓取。其余如/SCRIPT/目录（调用的SCRIPT文件）、/PLUGIN/ （插件目录）、/FUNCTION/、/UPDATE/ 、/DATA/ 、/CACHE/、/STYLE/ 、/TEMPLATE/ 、/CSS/、/LANGUAGE/ 等目录都不需抓取，可以照该行写语法禁止。
#Files //以下的这些文件也不需要抓取
Disallow:/login.asp //登录后台文件，自然不需要抓取。另外如cmd.asp，search.asp ，atom.xml ，rss.xml，view.asp等，都可以视需要禁止搜索引擎抓取。

我个人的意见是仅允许搜索引擎抓取首页和网站分类页，以及各个具体 内容页和相关Tags页面即可。

您可能还对这些文章感兴趣

最新Godaddy优惠码 2012年 - 长期更新