Pregled i obrada teksta

Naredba uniq

Uklonite ili prebrojite duple retke

Linux · Bash primjeri · naredbe se izvode na odabranom poslužitelju

Kada koristiti uniq

Koristite uniq za usporedbu susjednih linija. Prvo sortirajte kada se jednaki zapisi mogu pojaviti u različitim dijelovima datoteke, ali sačuvajte izvorni redoslijed drugom metodom ako je redoslijed važan.

Sintaksa

uniq [PARAMETERS] [INPUT [OUTPUT]]

Uglate zagrade označavaju neobavezne argumente; elipsa znači ponavljanje. Zamijenite primjere naziva datoteka, korisničkih imena i adresa poslužitelja vlastitim vrijednostima.

Uobičajene opcije i argumenti

-c
Prikaži broj ponavljanja.
-d
Prikaži samo duplikate grupa.
-u
Prikaži samo retke koji se ne ponavljaju.

Primjeri uporabe

Uklonite susjedne duplikate

uniq ./sorted.txt

Sažimaju se samo uzastopni ponovljeni redovi.

Broji identične retke

sort ./names.txt | uniq -c

Razvrstavanje grupa jednakih naziva tako da broj pojavljivanja pokriva cijeli unos.

Prikaži duplicirane vrijednosti

sort ./names.txt | uniq -d

Nakon sortiranja ispisuju se samo imena koja se ponavljaju.

Napomene i ograničenja

  • Uspoređuju se samo susjedni retci: za zajednički popis prvo napravite sort.
  • Redoslijed i koncept jednakosti mogu ovisiti o lokalnoj postavci i odabranim opcijama.

Uobičajena pitanja i rješavanje problema

Zašto su duplicirani redovi i dalje prisutni?

Uspoređuju se samo susjedni identični redovi. Zasebna pojavljivanja ostaju osim ako ih prvo ne grupirate ili koristite alat sa kompletom ključeva s punim unosom.

Hoće li sort nakon kojeg slijedi uniq sačuvati redoslijed unosa?

Ne. Razvrstavanje mijenja redoslijed. Ako je izvorni redoslijed važan, upotrijebite metodu deduplikacije koja čuva redoslijed i razmotrite potrebnu memoriju za njegov skup ključeva.

Dodatna pomoć

Opcije se razlikuju ovisno o verziji i distribuciji. Provjerite instaliranu dokumentaciju ovom naredbom: man uniq.