第一：測試文件

test.txt

第二：文件內(nèi)容? ??

原始文件內(nèi)容? ?

第三：參數(shù)解釋

Linux uniq命令用于檢查及刪除文本文件中重復(fù)出現(xiàn)的行列。

uniq可檢查文本文件中重復(fù)出現(xiàn)的行列。

語法

uniq [-cdu][-f<欄位>][-s<字符位置>][-w<字符位置>][--help][--version][輸入文件][輸出文件]

參數(shù)：

-c或–count 在每列旁邊顯示該行重復(fù)出現(xiàn)的次數(shù)。

-d或–repeated 僅顯示重復(fù)出現(xiàn)的行列。

-f<欄位>或–skip-fields=<欄位> 忽略比較指定的欄位。

-s<字符位置>或–skip-chars=<字符位置> 忽略比較指定的字符。

-u或–unique 僅顯示出一次的行列。

-w<字符位置>或–check-chars=<字符位置> 指定要比較的字符。

–help 顯示幫助。

–version 顯示版本信息。

[輸入文件] 指定已排序好的文本文件。

[輸出文件] 指定輸出的文件。

3.1. 不加任何參數(shù)

刪除重復(fù)項（重復(fù)行只保留一行）

3.2. 參數(shù)c

刪除重復(fù)項的同時，將重復(fù)行的重復(fù)次數(shù)給顯示出來

經(jīng)sort排序后，在進行uniq，則為正確的去重結(jié)果。

3.3. 參數(shù)d

作用：只顯示重復(fù)項（重復(fù)行）每個重復(fù)項只顯示一個，可以和參數(shù)c同時使用，結(jié)果如下：

3.4. 參數(shù)D

作用：只顯示重復(fù)項（行），輸出所有的重復(fù)行，即刪除非重復(fù)的行

3.5. 參數(shù)i

作用：忽略大小寫之分，結(jié)果如下：

3.6. 參數(shù)f

作用：忽略的字段，比如：-f?1?忽略第一段

3.7. 參數(shù)u（unique）

作用：保留唯一項，刪除重復(fù)項（刪除所有的重復(fù)項，只保留非重復(fù)的項）