SEO研究,百度对301彻底无视,301后的robots.txt设置
时间:2010-12-26
来源:互联网
SEO研究,百度对SEO基本无视,旧域名www.cn-ag.com 权重已经超过新域名www.baiyintouzi.com,尽管301后仅仅是一个一级目录www.baiyintouzi.com/bbs而已,但仍然是收录不减,快照每日,关键词排名已经把新站弄的都没有了。
因为不想影响用户的旧地址访问,因为还有很多外链是旧地址的,所以不想撤销全站301 . 因此决定在旧站上通过robots.txt彻底屏蔽蜘蛛,但1个月时间过去了,情况一直没有好转,难道百度不听话了。连ROBOTS.TXT都限制不住它了?
让我思考了整站301后蜘蛛读取robots.txt是否也会转移。
301后的robots.txt读取是否也会转移,我想既然所有的请求都重定向了,蜘蛛访问robots.txt也没有特权可言.和用户一样的。
所以,读取的应该是转移后的新网站上的robots.txt,所以,如果在旧域名的空间上通过robots.txt禁止蜘蛛访问的话是不会起作用的。
所以要把旧域名屏蔽蜘蛛,集中权重到主站。所以要通过字符串方式,写入.htaccess以下指令。
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /robots\.txt\ HTTP/
RewriteRule ^robots\.txt$ baidu/robots.txt
是把ROBOTS.TXT转移到 新域名的 baidu/robots.txt
在新空间上建立个baidu的文件夹,然后把要用的robots.txt放到到新空间上的baidu文件夹里去。
然后在新的robots.txt上屏蔽即可。
正在实验中,如不久后旧站的百度收录彻底删除旧域名则宣告成功……
因为不想影响用户的旧地址访问,因为还有很多外链是旧地址的,所以不想撤销全站301 . 因此决定在旧站上通过robots.txt彻底屏蔽蜘蛛,但1个月时间过去了,情况一直没有好转,难道百度不听话了。连ROBOTS.TXT都限制不住它了?
让我思考了整站301后蜘蛛读取robots.txt是否也会转移。
301后的robots.txt读取是否也会转移,我想既然所有的请求都重定向了,蜘蛛访问robots.txt也没有特权可言.和用户一样的。
所以,读取的应该是转移后的新网站上的robots.txt,所以,如果在旧域名的空间上通过robots.txt禁止蜘蛛访问的话是不会起作用的。
所以要把旧域名屏蔽蜘蛛,集中权重到主站。所以要通过字符串方式,写入.htaccess以下指令。
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /robots\.txt\ HTTP/
RewriteRule ^robots\.txt$ baidu/robots.txt
是把ROBOTS.TXT转移到 新域名的 baidu/robots.txt
在新空间上建立个baidu的文件夹,然后把要用的robots.txt放到到新空间上的baidu文件夹里去。
然后在新的robots.txt上屏蔽即可。
正在实验中,如不久后旧站的百度收录彻底删除旧域名则宣告成功……
作者: jjiabinb 发布时间: 2010-12-26
这方法我也想用,可是就技术差了点。不错不错。
作者: vianufo 发布时间: 2010-12-26
★★★★★★SEOer交流群★★群号:52935100 欢迎你的加入!★★★★★★
作者: wxcwxc1 发布时间: 2010-12-26
来瞧瞧。。。。
作者: langlangufo 发布时间: 2010-12-26
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28