Texte ansehen und bearbeiten

Befehl uniq

Entfernen oder zählen Sie doppelte Zeilen

Linux · Bash-Beispiele · Befehle, die auf dem ausgewählten Server ausgeführt werden

Wann ist uniq zu verwenden?

Verwenden Sie uniq, um benachbarte Zeilen zu vergleichen. Sortieren Sie zuerst, wenn gleiche Datensätze in verschiedenen Teilen einer Datei vorkommen können. Behalten Sie jedoch die ursprüngliche Reihenfolge durch eine andere Methode bei, wenn die Reihenfolge wichtig ist.

Syntax

uniq [PARAMETERS] [INPUT [OUTPUT]]

Eckige Klammern kennzeichnen optionale Argumente; Auslassungspunkte bedeuten Wiederholung. Ersetzen Sie Beispieldateinamen, Benutzernamen und Serveradressen durch Ihre eigenen Werte.

Gemeinsame Optionen und Argumente

-c
Anzahl der Wiederholungen anzeigen.
-d
Nur doppelte Gruppen anzeigen.
-u
Nur sich nicht wiederholende Zeilen anzeigen.

Anwendungsbeispiele

Entfernen Sie benachbarte Duplikate

uniq ./sorted.txt

Nur aufeinanderfolgende wiederholte Zeilen werden reduziert.

Zählen Sie identische Zeilen

sort ./names.txt | uniq -c

Beim Sortieren werden Gruppen mit gleichen Namen sortiert, sodass die Anzahl der Vorkommen die gesamte Eingabe abdeckt.

Doppelte Werte anzeigen

sort ./names.txt | uniq -d

Nach der Sortierung werden nur Namen gedruckt, die wiederholt vorkommen.

Hinweise und Einschränkungen

  • Es werden nur benachbarte Zeilen verglichen: Führen Sie für eine gemeinsame Liste zunächst sort aus.
  • Die Reihenfolge und das Gleichheitskonzept können vom Gebietsschema und den ausgewählten Optionen abhängen.

Häufige Fragen und Fehlerbehebung

Warum sind immer noch doppelte Zeilen vorhanden?

Es werden nur benachbarte identische Zeilen verglichen. Separate Vorkommen bleiben bestehen, es sei denn, Sie gruppieren sie zuerst oder verwenden ein Werkzeug mit einem vollständigen Eingabetastensatz.

Wird sort gefolgt von uniq die Eingabereihenfolge beibehalten?

Nr. Durch die Sortierung wird die Reihenfolge geändert. Wenn die ursprüngliche Reihenfolge wichtig ist, verwenden Sie eine reihenfolgeerhaltende Deduplizierungsmethode und berücksichtigen Sie den für den Schlüsselsatz erforderlichen Speicher.

Weitere Hilfe

Die Optionen variieren je nach Version und Distribution. Überprüfen Sie die installierte Dokumentation mit diesem Befehl: man uniq.