+ -
当前位置:首页 → 问答吧 → 求助 150页的数据,我想分成每10页一采。我应该怎么操作

求助 150页的数据,我想分成每10页一采。我应该怎么操作

时间:2011-12-21

来源:互联网

难到我要在数据库里存每一页的连接地址存150条在数据库里吗???
请问一下,有没有更好点的办法。我主要是要解决采集页数过多造成失败的问题(我想分小页量每一次采是最好的办法了)

作者: xiachao2008   发布时间: 2011-12-21

一样的。
10页一页一采需10次请求。
10页10页一采也需10次请求。



能做到的就是请求一次尽量延时sleep()一下,避免请求太烦琐。

作者: ci1699   发布时间: 2011-12-21

一页一页采也行啊,还请指点一下。怎么操作一下。

作者: xiachao2008   发布时间: 2011-12-21

你现在是出了哪些问题呢? 

引用 2 楼 xiachao2008 的回复:

一页一页采也行啊,还请指点一下。怎么操作一下。

作者: ci1699   发布时间: 2011-12-21

我循环150页的内容
只能才到前10页,后面的数据就出错了。

作者: xiachao2008   发布时间: 2011-12-21

在吗
引用 3 楼 ci1699 的回复:

你现在是出了哪些问题呢?

引用 2 楼 xiachao2008 的回复:

一页一页采也行啊,还请指点一下。怎么操作一下。

作者: xiachao2008   发布时间: 2011-12-21