delphi数据库统计txt文本中数据个数的难题
1、本人有300多个txt文本,每个文本的数据是120万左右,数据格式是逗号间隔。每个文本的数据是从1----150万之间的序号数据,乱序、且大量重复数据。2、我想在数据库表中第一列输入行号,那么文本中的数据恰好与数据表中的行号对应用。统计文本中数据的时候,只是在数据表第二列对应的行添加数据个数。
3、我想用数据表统计300多个文本中所有数据出现的次数。并且因为文本更新频繁,一天内需要几十次的统计,需要极快的统计方法。特请大神给于详细指教:
一、用什么样的数据库比较好
二、绝不能采用全部导入数据库在处理的方式,这样太慢
三、如何做到每统计完一个文本则释放一次内存。
四、归根到底,是要求一个速度极快的算法
请大神指教,最好来一段代码,拜谢了
[ 本帖最后由 pixiu555 于 2014-12-17 08:20 编辑 ]