批處理如何快速刪除大文本文件里面的多余重復(fù)行重復(fù)行只保留一行

批處理如何快速刪除大文本文件里面的多余重復(fù)行重復(fù)行只保留一行最后由 pcl_test 于 -11-3 16:49有a.TXT, 大小為280M,里面有2800萬行的數(shù)字或者字母或者特殊符號(hào)，每行最多有12個(gè)字符，最少有8個(gè)字符！其中有很多重復(fù)行。我想刪除重復(fù)行中的一行，保留另一行。簡(jiǎn)單說就是二行留一行。內(nèi)容舉例如下：aaaaaaaaaaaabbbbbbbb=+*&^%#$@/dddddddddaaaaaaaaaaaadddddddddeeeeeeee,.qdp{}?#&=@#$!()[]-=@gggggggghhhhhhhhh顯然aaaaaaaaaaaa與ddddddddd，這2行出現(xiàn)了2次重復(fù),處理后相同的行只保留其一，其它的行不處理，保留。將處理后的結(jié)果放在B.txt里面。結(jié)果如下：aaaaaaaaaaaabbbbbbbb=+*&^%#$@/dddddddddeeeeeeee,.qdp{}?#&=@#$!()[]-=@gggggggghhhhhhhhh我試過很多批處理都不行，包括本站搜索得來的批處理，要么速度非常非常慢，無法忍受。要么無法運(yùn)行，黑窗口、b.txt為0字節(jié)。還試過很多軟件，【如（Replace Pioneer），文件太大，打不開?！?，【（UltraEdit），排序時(shí)提示錯(cuò)誤?！?，【（TXT 重復(fù)行刪除工具 v1.1.exe），運(yùn)行后半個(gè)小時(shí)無響應(yīng)】，【（文本重復(fù)去除器.exe），提示：請(qǐng)稍等，正在去重復(fù)。運(yùn)行了12個(gè)小時(shí)后，我看到，2800W行，只對(duì)比了10W多行。運(yùn)行十天也對(duì)比不完啊】。我這個(gè)280M的大文件是把很多txt小文件合并得來的，在合并之前，有沒有什么方法比對(duì)這些小的txt文件中間有沒有重復(fù)行并刪一行留一行呢？反正用什么方法都可以！分割、比對(duì)、合并，其它軟件（使用方法），只要達(dá)到目的就行?。。≡趺崔k?。。。?請(qǐng)各位老大，各位高手斑竹顯身吧?。?！