Visualisation et traitement du texte

Commande uniq

Supprimer ou compter les lignes en double

Linux · Exemples Bash · commandes exécutées sur le serveur sélectionné

Quand utiliser uniq

Utilisez uniq pour comparer les lignes adjacentes. Triez d'abord lorsque des enregistrements égaux peuvent apparaître dans différentes parties d'un fichier, mais conservez l'ordre d'origine via une autre méthode si la séquence est importante.

Syntaxe

uniq [PARAMETERS] [INPUT [OUTPUT]]

Les crochets marquent les arguments facultatifs ; une ellipse signifie une répétition. Remplacez les exemples de noms de fichiers, de noms d'utilisateur et d'adresses de serveur par vos propres valeurs.

Options et arguments courants

-c
Afficher le nombre de répétitions.
-d
Afficher uniquement les groupes en double.
-u
Afficher uniquement les lignes non répétitives.

Exemples d'utilisation

Supprimer les doublons adjacents

uniq ./sorted.txt

Seules les lignes répétées consécutives sont réduites.

Compter les lignes identiques

sort ./names.txt | uniq -c

Le tri des groupes est égal aux noms afin que le nombre d'occurrences couvre l'intégralité de l'entrée.

Afficher les valeurs en double

sort ./names.txt | uniq -d

Seuls les noms qui apparaissent de manière répétée sont imprimés après le tri.

Remarques et limites

  • Seules les lignes adjacentes sont comparées : pour une liste partagée, faites d'abord sort.
  • L'ordre et le concept d'égalité peuvent dépendre des paramètres régionaux et des options sélectionnées.

Questions courantes et dépannage

Pourquoi des lignes en double sont-elles toujours présentes ?

Seules les lignes identiques adjacentes sont comparées. Les occurrences distinctes restent sauf si vous les regroupez d'abord ou si vous utilisez un outil avec un jeu de touches de saisie complet.

sort suivi de uniq conservera-t-il l'ordre de saisie ?

Non. Le tri change l’ordre. Si l'ordre d'origine est important, utilisez une méthode de déduplication préservant l'ordre et tenez compte de la mémoire nécessaire pour son jeu de clés.

Aide supplémentaire

Les options varient selon la version et la distribution. Vérifiez la documentation installée avec cette commande : man uniq.