+ -
当前位置:首页 → 问答吧 → 大文件合并问题

大文件合并问题

时间:2011-08-05

来源:互联网

我有两个大文件,每个文件都在10G以上,文件内容格式如下:word1 cnt\n word2 cnt\n....,文件1和文件2中的word有重复,我要将重复word的cnt相加,当然word1在文件2中可能不存在,我要将这两个文件合并成一个文件,请高手请教如何解决!

作者: dingli321   发布时间: 2011-08-05

没想到什么好办法,直观地看,只有将较大的一个排序,把另一个按关键字累加或插入到前一个文件中。

作者: xibeitianlang   发布时间: 2011-08-05

还是用数据库吧。

作者: nicenight   发布时间: 2011-08-05

引用 2 楼 nicenight 的回复:

还是用数据库吧。

一个文件都几亿条,我怎么用数据库来搞?

作者: dingli321   发布时间: 2011-08-05