我觉得好难啊
时间：2010-12-30
来源：互联网
谢谢了 多多发言
作者: 鱼儿z 发布时间: 2010-12-30
作者: English 发布时间: 2010-12-30
作者: 鱼儿z 发布时间: 2010-12-30
建议：Disallow掉全部的动态页面，生成全部HTML。
具体方法：
建立一个robots.txt文本放在网站根目录。
然后robots.txt的内容：
注意：// 是注解。
User-agent: * //所有的爬虫
Disallow:/html/ //禁止爬这个目录下的所有文本。
Disallow:/seowhy.html //禁止爬这个文本。
更多的请搜索：什么是robots.txt
如果您觉得我回答得好，请给我“评分”谢谢！
作者: English 发布时间: 2010-12-30
作者: 乐活seo 发布时间: 2010-12-30
作者: smallpanda2008 发布时间: 2010-12-30
作者: 山东的风 发布时间: 2010-12-30
做成静态的会好很多！htm的比html的好一些，
作者: 东莞seo 发布时间: 2010-12-30
作者: hujiamin 发布时间: 2010-12-30
作者: fallenangel 发布时间: 2010-12-30
作者: niaoke 发布时间: 2010-12-30
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读：74
-
如何安装mysql8.0
阅读：31
-
Word快速设置标题样式步骤详解
阅读：28
-
20+道必知必会的Vue面试题（附答案解析）
阅读：37
-
HTML如何制作表单
阅读：22
-
百词斩可以改天数吗？当然可以，4个步骤轻松修改天数！
阅读：31
-
ET文件格式和XLS格式文件之间如何转化？
阅读：24
-
react和vue的区别及优缺点是什么
阅读：121
-
支付宝人脸识别如何关闭?
阅读：21
-
腾讯微云怎么修改照片或视频备份路径?
阅读：28
