Visualizzazione ed elaborazione del testo

Comando uniq

Rimuovi o conta le righe duplicate

Linux · Esempi Bash · i comandi vengono eseguiti sul server selezionato

Quando utilizzare uniq

Utilizzare uniq per confrontare linee adiacenti. Ordina prima quando possono verificarsi record uguali in parti diverse di un file, ma preserva l'ordinamento originale tramite un altro metodo se la sequenza è importante.

Sintassi

uniq [PARAMETERS] [INPUT [OUTPUT]]

Le parentesi quadre contrassegnano gli argomenti facoltativi; i puntini di sospensione significano ripetizione. Sostituisci nomi di file di esempio, nomi utente e indirizzi di server con i tuoi valori.

Opzioni e argomenti comuni

-c
Mostra il numero di ripetizioni.
-d
Mostra solo i gruppi duplicati.
-u
Mostra solo le righe non ripetute.

Esempi di utilizzo

Rimuovi i duplicati adiacenti

uniq ./sorted.txt

Vengono compresse solo le righe ripetute consecutive.

Conta le linee identiche

sort ./names.txt | uniq -c

L'ordinamento dei gruppi ha nomi uguali in modo che il conteggio delle occorrenze copra l'intero input.

Mostra valori duplicati

sort ./names.txt | uniq -d

Solo i nomi che ricorrono ripetutamente vengono stampati dopo l'ordinamento.

Note e limitazioni

  • Vengono confrontate solo le righe adiacenti: per un elenco condiviso, prima fare sort.
  • L'ordine e il concetto di uguaglianza possono dipendere dalla locale e dalle opzioni selezionate.

Domande comuni e risoluzione dei problemi

Perché sono ancora presenti linee duplicate?

Vengono confrontate solo le linee identiche adiacenti. Rimangono occorrenze separate a meno che non le raggruppi prima o utilizzi uno strumento con un set di tasti di input completo.

sort seguito da uniq manterrà l'ordine di input?

No. L'ordinamento cambia l'ordine. Se l'ordine originale è importante, utilizza un metodo di deduplicazione che preserva l'ordine e considera la memoria necessaria per il relativo set di chiavi.

Ulteriore aiuto

Le opzioni variano in base alla versione e alla distribuzione. Controlla la documentazione installata con questo comando: man uniq.