+ -
当前位置:首页 → 问答吧 → 请教高手一个robots中的设置问题

请教高手一个robots中的设置问题

时间:2011-01-05

来源:互联网

大家好,我一个网站,比如:
[url]www.aaa.cn[/url]
里面的帖子大多是这样子的,
[url]http://www.aaa.cn/ShowPost.asp?ThreadID=693[/url]
我想让蜘蛛只收录首页和上面的动态页面,
不知道如何设置:

User-agent:*
Allow:/index.asp
Allow:/showpost.asp?ThreadID = ***
Disallow:/admin/

是这样的吗?

希望大家给我一个完整的robots文件样式。

谢谢!

作者: digital2005   发布时间: 2011-01-05

User-agent:*
Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID =

作者: addedjacky   发布时间: 2011-01-05

楼上可以的,你只要把自己想要收录的URL看看,很容易就能写出

作者: maimai   发布时间: 2011-01-05

[quote]原帖由 [i]addedjacky[/i] 于 2011-1-5 11:11 发表 [url=http://www.seowhy.com/bbs/redirect.php?goto=findpost&pid=1776889&ptid=251243][/url]
User-agent:*
Disallow:/
Allow:/index.asp
Allow:/showpost.asp?ThreadID = [/quote]
正解

作者: 8866   发布时间: 2011-01-05

热门下载

更多