一个CSV文件，大概5万多行，我截取的其中的三大段数据，分段根据是Pos X和Pos Y 两项从0和0到下一个0和0前一行，或者是Board info项一致的是一段。其中每段的结尾都有一行或数行与前面的Pos X和Pos Y 两项数据重复的（注：也有可能没有，例如第二段），例如编号项（Number项）95的那一行，Pos X和Pos Y 两项数据是1和3，这一行就与编号项（Number项）8的那一行Pos X和Pos Y 两项数据重复；再举例例如编号项（Number项）286和287的那两行，Pos X和Pos Y 两项数据分别是7、0和12、3，这两行就与编号项（Number项）226和254的那两行Pos X和Pos Y 两项数据重复。
现在想把重复的行进行替换，方法是重复行后面的整行数据把前面的整行数据进行覆盖替换，然后将后面的进行删除。例如前面第一个例子，先用编号项（Number项）95的那一行整行把编号项（Number项）8的那一行整行覆盖，然后将编号项（Number项）95的那一行整行删除，这样在一段数据中Pos X和Pos Y 两项就没有重复的了。第二段没有重复行就跳过，第三段用编号项（Number项）286和287的那两行覆盖编号项（Number项）226和254，然后删除286和287的那两行。

可能不能够用删除指定行的方式删除，因为前面的行删除后，后面的行顶上，行号就变了。CSV文件中不能有空行。

没时间写代码。也没时间看说明。

-------------------
想的算法就是 使用数据库连接的方式打开 CSV 文件（文本文件） ，然后使用 数据命令去 删重复项。
这种相当于直接操作数据库，代码简单。
但百度也没找到相关的内容，说明这个内容很偏，你慢慢找找吧。

------------------
另一种常规算法
要么自己写代码分析，把这个文件一行一行的分析到 二维数组中。然后进行操作。
修改的直接修改内容，删除的清除内容
保存时，判断内容，同时计数修改行号，进行保存。

要么，就直接考虑使用一个临时数据库，
把TXT导数据库，然后查询重复项。对查出来的重复项，用后面的内容更新前面的内容
再删后面的重复内容
最后重排所有的行号，导出文本文件。

MSSQL 提供了导入，导出TXT文件的命令。不知道MDB支不支付。你可以参考一下。
MYSQL 也同样提供了，导入导出速度超级快。

用excel就可以打开文件,编段VBA代码把重复行删除就可以了

1、读入execl到内存
2、利用双循环比较
3、我简单写了下，界面的什么都没做优化，供参考。


其中：New.xls是根据你的数据自动生成的。
其中的行号我没有更改，采用原始数据的，如果更改，只需在保存赋值时替换就可以。

[此贴子已经被作者于2017-11-25 14:10编辑过]