Melihat dan memproses teks

Perintah uniq

Hapus atau hitung garis duplikat

Linux · Contoh Bash · perintah dijalankan pada server yang dipilih

Kapan menggunakan uniq

Gunakan uniq untuk membandingkan garis yang berdekatan. Urutkan terlebih dahulu ketika rekaman yang sama dapat muncul di bagian file yang berbeda, namun pertahankan pengurutan asli melalui metode lain jika urutannya penting.

Sintaks

uniq [PARAMETERS] [INPUT [OUTPUT]]

Tanda kurung siku menandai argumen opsional; elipsis berarti pengulangan. Ganti contoh nama file, nama pengguna, dan alamat server dengan nilai Anda sendiri.

Pilihan dan argumen umum

-c
Tunjukkan jumlah pengulangan.
-d
Tampilkan grup duplikat saja.
-u
Hanya tampilkan garis yang tidak berulang.

Contoh penggunaan

Hapus duplikat yang berdekatan

uniq ./sorted.txt

Hanya garis berulang yang berurutan yang diciutkan.

Hitung garis yang identik

sort ./names.txt | uniq -c

Mengurutkan grup dengan nama yang sama sehingga jumlah kemunculan mencakup seluruh masukan.

Tampilkan nilai duplikat

sort ./names.txt | uniq -d

Hanya nama yang muncul berulang kali yang dicetak setelah penyortiran.

Catatan dan batasan

  • Hanya baris berdekatan yang dibandingkan: untuk daftar bersama, lakukan sort terlebih dahulu.
  • Tatanan dan konsep kesetaraan mungkin bergantung pada lokasi dan pilihan yang dipilih.

Pertanyaan umum dan pemecahan masalah

Mengapa garis duplikat masih ada?

Hanya garis-garis identik yang berdekatan yang dibandingkan. Kejadian terpisah akan tetap ada kecuali Anda mengelompokkannya terlebih dahulu atau menggunakan alat dengan rangkaian kunci input lengkap.

Akankah sort diikuti oleh uniq mempertahankan urutan input?

Tidak. Penyortiran mengubah urutan. Jika urutan asli penting, gunakan metode deduplikasi yang mempertahankan pesanan dan pertimbangkan memori yang diperlukan untuk kumpulan kuncinya.

Bantuan lebih lanjut

Pilihan bervariasi berdasarkan versi dan distribusi. Periksa dokumentasi yang diinstal dengan perintah ini: man uniq.