没有外链的网页,没有人提交 蜘蛛爬虫能爬进去吗?
时间:2011-08-17
来源:互联网
没有外链的网页,没有人提交 蜘蛛爬虫能爬进去吗?
根据蜘蛛爬虫的原理,我想 不会爬进去呀~
今天后台没有用 iframe 被组长说了~
擦~
其中组长说到了这点:3. iframe爬虫是不解释的.后台不需要让它爬.
根据蜘蛛爬虫的原理,我想 不会爬进去呀~
今天后台没有用 iframe 被组长说了~
擦~
其中组长说到了这点:3. iframe爬虫是不解释的.后台不需要让它爬.
作者: 小囧 发布时间: 2011-08-17
不是所有爬虫都按规矩行事的
作者: 大尾巴 发布时间: 2011-08-17
你们组长是傻逼,直接用robot.txt控制后台不被蜘蛛爬就行了,跟TMD用不用iframe有半毛钱关系
作者: qxhy123 发布时间: 2011-08-17
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28