在Linux系統(tǒng)中,可以使用以下方法去除重復(fù)行:
sort file.txt | uniq > newfile.txt
awk '!seen[$0]++' file.txt > newfile.txt
sed '$!N; /^\(.*\)\n\1$/!P; D' file.txt > newfile.txt
以上是幾種常見的去除重復(fù)行的方法,你可以根據(jù)具體情況選擇適合自己的方法進(jìn)行操作。
億速云公眾號(hào)
手機(jī)網(wǎng)站二維碼
Copyright ? Yisu Cloud Ltd. All Rights Reserved. 2018 版權(quán)所有
廣州億速云計(jì)算有限公司粵ICP備17096448號(hào)-1 粵公網(wǎng)安備 44010402001142號(hào)增值電信業(yè)務(wù)經(jīng)營(yíng)許可證編號(hào):B1-20181529