+ -
当前位置:首页 → 问答吧 → 设置了robots.txt拒绝收录,但百度依然收录,怎么办啊?

设置了robots.txt拒绝收录,但百度依然收录,怎么办啊?

时间:2011-05-08

来源:互联网

User-agent: *
Allow: /search.asp?*key=*
Disallow: /play/
Disallow: /upload/
Allow: /*

我设置了 拒绝搜索引擎收录PLAY目录内容, 可今天却惊奇发现 百度收录了

site:www.dywg.cn  得到如下收录内容

正在播放 实习医生格蕾第7季 - 电影王国主演: 艾伦·旁派 帕特里克·德姆西 詹姆斯·皮肯斯 T.R.耐特 桑德拉·欧 凯瑟琳·海格尔 钱德拉·威尔森 以赛亚·华盛顿 贾斯汀·钱伯斯 萨拉·拉米雷 杰西卡·...
www.dywg.cn/play/3543/qvod.html?playid=qv ... 2011-5-7 - 百度快照

作者: qu000   发布时间: 2011-05-08

为什么不让他收录呢

作者: 天地联网   发布时间: 2011-05-08

刚 拒绝? 等等看吧。。

作者: qixn   发布时间: 2011-05-08

就是呀。收录了不好吗。

作者: kingcjl   发布时间: 2011-05-08

不明白

作者: aifeizj   发布时间: 2011-05-07