是时候该生成你的Robots.txt了!

robots.txt文件生成 来自站长工具箱

百度搜索帮助中心-禁止搜索引擎收录的方法

对于wordpress来说应该禁止的是

/blog/wp-admin/

/blog/wp-content/

/blog/wp-includes/

是时候该生成你的Robots.txt了!

点击生成,于是就有下面的结果了。把robot.txt放到网站根目录吧!~~~

是时候该生成你的Robots.txt了!

原创文章,作者:jessegold,如若转载,请注明出处:https://www.hero4u.cn/blog/2012/07/it-is-time-to-generate-robots-txt/

(0)
jessegoldjessegold
上一篇 2012-07-28
下一篇 2012-07-28

相关推荐