+ -
当前位置:首页 → 问答吧 → 关于数据处理优化的问题,太难了

关于数据处理优化的问题,太难了

时间:2011-03-23

来源:互联网

有日常处理数据的任务,从ip1的服务器上镜像数据到ip2上处理。每五分钟镜像判断一次有没有新数据包,有的话就解压处理。但是现在的问题是5分钟镜像一次判断新数据来得及,但是由于数据包多,光解压文件就得花20几分钟,来不及处理啊。需求是:有什么办法可以在10分钟内镜像新数据并解压完成。谢谢!

作者: Roby83   发布时间: 2011-03-23

我现在想到的只有,另建文件夹,5分钟镜像时判断新数据,将新数据用lftp下载到新文件夹里,再处理这个文件夹里的数据包。但是我脑子转不过来,感觉还是解决不了问题啊。

作者: Roby83   发布时间: 2011-03-23

高手指点下啊

作者: Roby83   发布时间: 2011-03-23

用存储...嘿嘿,这个镜像都省了..

作者: 南极雨   发布时间: 2011-03-23

是实时业务,一小时出一次结果的

作者: Roby83   发布时间: 2011-03-23

帮帮忙啊。。。。。。

作者: Roby83   发布时间: 2011-03-23

热门下载

更多