2009/03/01 2 Comments
这几天因为帮朋友测试wordpress，就顺便了解了一些关于wordpress的robots.txt的写法，并打算将这些经验应用到Bo-Blog上，所以在这跟大家探讨一下下面的写法是否可行或者说是否有错漏不周之处。
Bo-Blog本身自带有一个robots.txt，内容如下：
可以看出这个默认的robots.txt相对比较宽松，基本
Bo-Blog本身自带有一个robots.txt，内容如下：
User-agent: *
Disallow: /admin/
Disallow: /bak/
Disallow: /data/
Disallow: /editor/
Disallow: /inc/
Disallow: /install/
Disallow: /images/
Disallow: /attachment/
Disallow: /temp/
Disallow: /template/
Disallow: /plugin/
Disallow: /view.php
Disallow: /admin/
Disallow: /bak/
Disallow: /data/
Disallow: /editor/
Disallow: /inc/
Disallow: /install/
Disallow: /images/
Disallow: /attachment/
Disallow: /temp/
Disallow: /template/
Disallow: /plugin/
Disallow: /view.php
可以看出这个默认的robots.txt相对比较宽松，基本
