当前位置：首页 → 问答吧 → Wordpress与robots.txt的问题

Wordpress与robots.txt的问题

时间：2014-07-16

来源：互联网

本人用Wordpress 整左个网站,但发现比google block 左。。。因为个robots.txt 内容系Disallow : /

所以我就manually upload 一个robots.txt file 上去

但好奇怪，我发现
www.xyz.com/robots.txt 与 xyz.com/robots.txt
既内容竟然系唔同

而google 一样系read xyz.com/robots.txt 呢个file。。。

究竟点样edit 呢个唔知几时gen 出来既robots.txt⋯⋯唔知大家有冇idea? ....一个网比google block 左真系好沮丧

作者: game-on 发布时间: 2014-07-16

引用:原帖由 game-on 於 2014-6-27 01:35 AM 发表
本人用Wordpress 整左个网站,但发现比google block 左。。。因为个robots.txt 内容系Disallow : /

所以我就manually upload 一个robots.txt file 上去

但好奇怪，我发现
www.xyz.com/robots.txt 与 xyz.com/r ...

估计是 robot.txt 被 WordPress rewrite URL 后（用 script ）自动产生。
https://wordpress.org/plugins/wp-robots-txt/

引用:WordPress, by default, includes a simple robots.txt file that's dynamically generated from within the WP application.

看看用相关 plugin 能否做到你想要的效果。

作者: xianrenb 发布时间: 2014-07-16

试左个plugin了，改既都系有www.果个robots.txt
冇www. 果个就点都改唔到