4G内存条 awk如何给百G.txt文件去重

2024-11-25 05:36:17
推荐回答(2个)
回答1:

如果只是对整行的文本进行比较,且不在乎顺序改变,可以用更简单的办法:
sort file.txt | uniq

先将所有行按字符串顺序进行排序,然后去除重复的行

回答2:

春江潮水连海平,海上明月共潮生