Ver y procesar texto

Comando uniq

Eliminar o contar líneas duplicadas

Linux · Ejemplos de Bash · Los comandos se ejecutan en el servidor seleccionado.

Cuándo utilizar uniq

Utilice uniq para comparar líneas adyacentes. Ordene primero cuando puedan aparecer registros iguales en diferentes partes de un archivo, pero conserve el orden original mediante otro método si la secuencia es importante.

Sintaxis

uniq [PARAMETERS] [INPUT [OUTPUT]]

Los corchetes marcan argumentos opcionales; una elipsis significa repetición. Reemplace los nombres de archivos de ejemplo, nombres de usuarios y direcciones de servidores con sus propios valores.

Opciones y argumentos comunes

-c
Muestra el número de repeticiones.
-d
Mostrar solo grupos duplicados.
-u
Mostrar sólo líneas que no se repiten.

Ejemplos de uso

Eliminar duplicados adyacentes

uniq ./sorted.txt

Sólo se contraen las líneas repetidas consecutivas.

Contar líneas idénticas

sort ./names.txt | uniq -c

Ordenar grupos con nombres iguales para que los recuentos de ocurrencias cubran toda la entrada.

Mostrar valores duplicados

sort ./names.txt | uniq -d

Sólo los nombres que aparecen repetidamente se imprimen después de ordenar.

Notas y limitaciones

  • Sólo se comparan las filas adyacentes: para una lista compartida, primero haga sort.
  • El orden y el concepto de igualdad pueden depender del lugar y de las opciones seleccionadas.

Preguntas comunes y solución de problemas

¿Por qué siguen presentes líneas duplicadas?

Sólo se comparan líneas idénticas adyacentes. Las ocurrencias separadas permanecen a menos que las agrupe primero o utilice una herramienta con un conjunto de claves de entrada completa.

¿sort seguido de uniq preservará el orden de entrada?

No. La clasificación cambia el orden. Si el orden original es importante, utilice un método de deduplicación que preserve el orden y considere la memoria necesaria para su conjunto de claves.

Más ayuda

Las opciones varían según la versión y la distribución. Consulta la documentación instalada con este comando: man uniq.