大数据量分析，perl 段错误

damofeixue

11^# damofeixue 发表于 2008-11-06 14:09

呵呵，习惯用正则了

damofeixue

12^# damofeixue 发表于 2008-11-06 14:11

只是搞不懂，为啥段错误了，估计还是hash太大，释放的不够

ly5066113

13^# ly5066113 发表于 2008-11-06 14:18

硬盘够大不？够用可以先用sort排序，然后将idnumber连续出现100个以上的打印出来就可以了。
只是sort会比较慢。

lifeistrue

14^# lifeistrue 发表于 2008-11-06 14:34

不错的方法

MMMIX

15^# MMMIX 发表于 2008-11-06 14:43

QUOTE:

原帖由 damofeixue 于 2008-11-6 14:08 发表

最终我是将数据load data到数据库，用sql的临时数据表，分组排序搞定了

如果你的数据库很强的话，这也是个方法。

QUOTE:

用磁盘空间做缓存，分批处理是通用的方法，也是比较有效的，就是太麻烦

很遗憾的是并不是所有问题都有简单的或者说不麻烦的解法。