linux怎么去除重復(fù)行

小億
113
2024-08-11 13:52:33

在Linux系統(tǒng)中,可以使用以下方法去除重復(fù)行:

  1. 使用sort和uniq命令結(jié)合使用:
sort file.txt | uniq > newfile.txt
  1. 使用awk命令:
awk '!seen[$0]++' file.txt > newfile.txt
  1. 使用sed命令:
sed '$!N; /^\(.*\)\n\1$/!P; D' file.txt > newfile.txt

以上是幾種常見的去除重復(fù)行的方法,你可以根據(jù)具體情況選擇適合自己的方法進(jìn)行操作。

0