Visa och bearbeta text

Kommandot uniq

Ta bort eller räkna dubbletter

Linux · Bash exempel · kommandon körs på den valda servern

När ska uniq användas

Använd uniq för att jämföra intilliggande linjer. Sortera först när lika poster kan förekomma i olika delar av en fil, men bevara originalordningen genom en annan metod om sekvensen spelar roll.

Syntax

uniq [PARAMETERS] [INPUT [OUTPUT]]

Hakparenteser markerar valfria argument; en ellips betyder upprepning. Byt ut exempel på filnamn, användarnamn och serveradresser med dina egna värden.

Vanliga alternativ och argument

-c
Visa antal repetitioner.
-d
Visa endast dubbletter av grupper.
-u
Visa endast rader som inte upprepas.

Användningsexempel

Ta bort intilliggande dubbletter

uniq ./sorted.txt

Endast på varandra följande upprepade rader komprimeras.

Räkna identiska rader

sort ./names.txt | uniq -c

Sortering av grupper har samma namn så att antalet förekomster täcker hela inmatningen.

Visa dubbletter av värden

sort ./names.txt | uniq -d

Endast namn som förekommer upprepade gånger skrivs ut efter sortering.

Anteckningar och begränsningar

  • Endast intilliggande rader jämförs: för en delad lista, gör först sort.
  • Ordningen och konceptet för jämlikhet kan bero på lokalen och de valda alternativen.

Vanliga frågor och felsökning

Varför finns det fortfarande dubbla linjer?

Endast intilliggande identiska linjer jämförs. Separata förekomster finns kvar om du inte grupperar dem först eller använder ett verktyg med en nyckeluppsättning med full inmatning.

Kommer sort följt av uniq att bevara inmatningsordningen?

Nej. Sortering ändrar ordning. Om den ursprungliga beställningen har betydelse, använd en orderbevarande dedupliceringsmetod och överväg det minne som behövs för dess nyckeluppsättning.

Ytterligare hjälp

Alternativen varierar beroende på version och distribution. Kontrollera den installerade dokumentationen med detta kommando: man uniq.