请教高手一个robots中的设置问题
时间:2011-01-05
来源:互联网
             大家好,我一个网站,比如:
[url]www.aaa.cn[/url]
里面的帖子大多是这样子的,
[url]http://www.aaa.cn/ShowPost.asp?ThreadID=693[/url]
我想让蜘蛛只收录首页和上面的动态页面,
不知道如何设置:
User-agent:*
Allow:/index.asp
Allow:/showpost.asp?ThreadID = ***
Disallow:/admin/
是这样的吗?
希望大家给我一个完整的robots文件样式。
谢谢!
            [url]www.aaa.cn[/url]
里面的帖子大多是这样子的,
[url]http://www.aaa.cn/ShowPost.asp?ThreadID=693[/url]
我想让蜘蛛只收录首页和上面的动态页面,
不知道如何设置:
User-agent:*
Allow:/index.asp
Allow:/showpost.asp?ThreadID = ***
Disallow:/admin/
是这样的吗?
希望大家给我一个完整的robots文件样式。
谢谢!
作者: digital2005 发布时间: 2011-01-05
             User-agent:*
Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID =
            Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID =
作者: addedjacky 发布时间: 2011-01-05
             楼上可以的,你只要把自己想要收录的URL看看,很容易就能写出            
            作者: maimai 发布时间: 2011-01-05
             [quote]原帖由 [i]addedjacky[/i] 于 2011-1-5 11:11 发表 [url=http://www.seowhy.com/bbs/redirect.php?goto=findpost&pid=1776889&ptid=251243][/url]
User-agent:*
Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID = [/quote]
正解
            User-agent:*
Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID = [/quote]
正解
作者: 8866 发布时间: 2011-01-05
 相关阅读 更多  
      
    热门阅读
-  
 office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
          阅读:74
 -  
 如何安装mysql8.0
          阅读:31
 -  
 Word快速设置标题样式步骤详解
          阅读:28
 -  
 20+道必知必会的Vue面试题(附答案解析)
          阅读:37
 -  
 HTML如何制作表单
          阅读:22
 -  
 百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
          阅读:31
 -  
 ET文件格式和XLS格式文件之间如何转化?
          阅读:24
 -  
 react和vue的区别及优缺点是什么
          阅读:121
 -  
 支付宝人脸识别如何关闭?
          阅读:21
 -  
 腾讯微云怎么修改照片或视频备份路径?
          阅读:28
 















