禁止蜘蛛访问部分路径 这样的写法是否正确 大家交流下
时间:2010-12-30
来源:互联网
如:以下网站路径
/news/abc-1.html
/news/abc-2.html
/news/abc-3.html
禁止蜘蛛收录 news目录内以"-1.html"结尾的页面,下面的写法是否正确!
User-agent: *
Disallow: /news/*-1.html$
大家交流下,看robots是否支持这样的写法!
/news/abc-1.html
/news/abc-2.html
/news/abc-3.html
禁止蜘蛛收录 news目录内以"-1.html"结尾的页面,下面的写法是否正确!
User-agent: *
Disallow: /news/*-1.html$
大家交流下,看robots是否支持这样的写法!
作者: lei8781 发布时间: 2010-12-30

作者: maybe 发布时间: 2010-12-30

作者: 黄昏 发布时间: 2010-12-30
问题自己解决了, 按上面的写法 然后在google管理员工具测试下
提示“阻止访问第 5 行:Disallow: /news/*-1.html$ ”
这个写法是有效的! 以后大家如果对自己写的robots不确定,可以在google管理员工具测试!
提示“阻止访问第 5 行:Disallow: /news/*-1.html$ ”
这个写法是有效的! 以后大家如果对自己写的robots不确定,可以在google管理员工具测试!

作者: lei8781 发布时间: 2010-12-30
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28