如何从行数较多(较大)的文件中多次读取某一特定行
时间:2011-03-22
来源:互联网
perl初学者
最近要处理一次数据,需要多次(上万次)从一个较大的文件中取特定的一些行,如果每次遍历文件,耗时,如果读入内存,耗内存;
注:每一行都有一个特定的标签;
将数据存入数据库的话,也比较慢,请问一下大家有什么好的建议没有?
最近要处理一次数据,需要多次(上万次)从一个较大的文件中取特定的一些行,如果每次遍历文件,耗时,如果读入内存,耗内存;
注:每一行都有一个特定的标签;
将数据存入数据库的话,也比较慢,请问一下大家有什么好的建议没有?
作者: xieshaojun0621 发布时间: 2011-03-22
本帖最后由 zhlong8 于 2011-03-22 23:18 编辑
什么事都有个极限,时间空间的复杂度在那摆着。你大文件又怕耗时又怕耗内存,除非你的数据极特殊否则只能念咒了。或许你可以预读一次只保存那个特征码,然后 seek,可能会少耗点内存
什么事都有个极限,时间空间的复杂度在那摆着。你大文件又怕耗时又怕耗内存,除非你的数据极特殊否则只能念咒了。或许你可以预读一次只保存那个特征码,然后 seek,可能会少耗点内存
作者: zhlong8 发布时间: 2011-03-22
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读:74
-
如何安装mysql8.0
阅读:31
-
Word快速设置标题样式步骤详解
阅读:28
-
20+道必知必会的Vue面试题(附答案解析)
阅读:37
-
HTML如何制作表单
阅读:22
-
百词斩可以改天数吗?当然可以,4个步骤轻松修改天数!
阅读:31
-
ET文件格式和XLS格式文件之间如何转化?
阅读:24
-
react和vue的区别及优缺点是什么
阅读:121
-
支付宝人脸识别如何关闭?
阅读:21
-
腾讯微云怎么修改照片或视频备份路径?
阅读:28