+ -
当前位置:首页 → 问答吧 → 禁止蜘蛛访问部分路径 这样的写法是否正确 大家交流下

禁止蜘蛛访问部分路径 这样的写法是否正确 大家交流下

时间:2010-12-30

来源:互联网

如:以下网站路径
/news/abc-1.html
/news/abc-2.html
/news/abc-3.html

禁止蜘蛛收录 news目录内以"-1.html"结尾的页面,下面的写法是否正确!
User-agent: *
Disallow: /news/*-1.html$
大家交流下,看robots是否支持这样的写法!

作者: lei8781   发布时间: 2010-12-30

牛人上去看看

作者: maybe   发布时间: 2010-12-30

作者: 黄昏   发布时间: 2010-12-30

问题自己解决了, 按上面的写法 然后在google管理员工具测试下
提示“阻止访问第 5 行:Disallow: /news/*-1.html$ ”
这个写法是有效的! 以后大家如果对自己写的robots不确定,可以在google管理员工具测试!

作者: lei8781   发布时间: 2010-12-30

热门下载

更多