Vizualizarea și procesarea textului

Comanda uniq

Eliminați sau numărați liniile duplicate

Linux · Exemple Bash · comenzile rulează pe serverul selectat

Când să utilizați uniq

Utilizați uniq pentru a compara liniile adiacente. Sortați mai întâi când înregistrările egale pot apărea în diferite părți ale unui fișier, dar păstrați ordinea originală printr-o altă metodă dacă secvența contează.

Sintaxă

uniq [PARAMETERS] [INPUT [OUTPUT]]

Parantezele pătrate marchează argumente opționale; o elipsă înseamnă repetiție. Înlocuiți exemple de nume de fișiere, nume de utilizator și adrese de server cu propriile valori.

Opțiuni și argumente comune

-c
Arată numărul de repetări.
-d
Afișați numai grupurile duplicat.
-u
Afișați numai linii care nu se repetă.

Exemple de utilizare

Eliminați duplicatele adiacente

uniq ./sorted.txt

Numai liniile repetate consecutive sunt restrânse.

Numărați linii identice

sort ./names.txt | uniq -c

Grupurile de sortare au nume egale, astfel încât numărul de apariții să acopere întreaga intrare.

Afișați valori duplicate

sort ./names.txt | uniq -d

Numai numele care apar în mod repetat sunt tipărite după sortare.

Note și limitări

  • Sunt comparate doar rândurile adiacente: pentru o listă partajată, mai întâi faceți sort.
  • Ordinea și conceptul de egalitate pot depinde de locație și de opțiunile selectate.

Întrebări frecvente și depanare

De ce sunt încă prezente linii duplicate?

Sunt comparate doar liniile adiacente identice. Aparițiile separate rămân dacă nu le grupați mai întâi sau nu utilizați un instrument cu un set complet de taste de introducere.

sort urmat de uniq va păstra ordinea de introducere?

Nu. Sortarea modifică ordinea. Dacă comanda inițială contează, utilizați o metodă de deduplicare care păstrează ordinea și luați în considerare memoria necesară pentru setul de chei.

Ajutor suplimentar

Opțiunile variază în funcție de versiune și distribuție. Verificați documentația instalată cu această comandă: man uniq.