+ -
当前位置:首页 → 问答吧 → 为什么网站日志中robots.txt的http状态码是404

为什么网站日志中robots.txt的http状态码是404

时间:2010-12-17

来源:互联网

代码如下,2010-12-16 00:19:45 W3SVC6454084 58.30.240.114 GET /robots.txt - 80 - 220.181.125.71 - 404 0 2
2010-12-16 00:28:13 W3SVC6454084 58.30.240.114 GET /robots.txt - 80 - 220.181.7.26 Baiduspider+(+[url]http://www.baidu.com/search/spider.htm[/url]) 404 0 64
2010-12-16 01:45:34 W3SVC6454084 58.30.240.114 GET /robots.txt - 80 - 203.208.60.91 Mozilla/5.0+(compatible;+Googlebot/2.1;++[url]http://www.google.com/bot.html[/url]) 404 0 2

这个是怎么回事呢,只要出现robots.txt的地方都出现了 404

作者: zzbzjxw   发布时间: 2010-12-17

额 来看看 也不大懂

作者: 爱购网减肥   发布时间: 2010-12-17