Subscribe RSS
Comment RSS给你的WordPress 博客建立一个 robots.txt 文件
December 6, 2008 # 8:24 am # 博客建设 # One Commentrobots.txt 文件的作用就是告诉搜索引擎的机器人应该检索和收录你博客的哪些页面。大多的WordPress博客都有一些内容或文件（例如图片以及admin目录下的文件）是不需要搜索引擎去收录的，因而建立一个robots.txt 文件可以增快你的博客被收录的速度和效果。
robots.txt 文件是一个简单的文本文件，你可以通过“文本文档”来建立一个。下面是WordPress 博客最简单的robots.txt 文件：
User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/
“User-agent: *”的意思是搜索引擎 (如 Google, Yahoo, MSN 等) 不能用该结构来检索你的博客。
“Disallow: /wp-”的作用是确保搜索引擎不会收录你的WordPress文件。使用了该代码后“wp-”目录下的内容都不会被收录，防止内容的重复提交。
后面两项的意思也是以此类推。
当你建立好你的robots.txt 文件后，直接把它上传到你的根目录下就可以了。
Popularity: 1% [?]
This entry was posted by 
[...] WordPress有文章分类以及文章归档等功能，这些功能是为了方便对读者的导航的。但如果博客上的单篇文章被Google收录了，而Google的机器人有在你的文章分类或文章归档那里找到相同的文章的话，傻傻的机器人就有可能认定你两篇（或多篇）相同的文章中有一篇是被转载的，这样就有会降低搜索权重。为了避免google的重复收录，你可以通过建立robots.txt 文件来告诉google哪些内容不要被收录。如果你不想使用robots.txt 文件的话，可以在wordpress主题中的header.php 文件内使用下面的代码： <?php if(is_archive()){ ?><meta name=”robots” content=”noindex”><?php } ?> [...]