การดูและการประมวลผลข้อความ

คำสั่ง uniq

ลบหรือนับบรรทัดที่ซ้ำกัน

Linux · ตัวอย่าง Bash · คำสั่งทำงานบนเซิร์ฟเวอร์ที่เลือก

เมื่อใดควรใช้ uniq

ใช้ uniq เพื่อเปรียบเทียบเส้นที่อยู่ติดกัน จัดเรียงก่อนเมื่อบันทึกที่เท่ากันสามารถเกิดขึ้นได้ในส่วนต่างๆ ของไฟล์ แต่คงการเรียงลำดับดั้งเดิมไว้ด้วยวิธีอื่นหากลำดับมีความสำคัญ

ไวยากรณ์

uniq [PARAMETERS] [INPUT [OUTPUT]]

วงเล็บเหลี่ยมทำเครื่องหมายอาร์กิวเมนต์เพิ่มเติม จุดไข่ปลาหมายถึงการทำซ้ำ แทนที่ชื่อไฟล์ตัวอย่าง ชื่อผู้ใช้ และที่อยู่เซิร์ฟเวอร์ด้วยค่าของคุณเอง

ตัวเลือกและข้อโต้แย้งทั่วไป

-c
แสดงจำนวนการทำซ้ำ
-d
แสดงเฉพาะกลุ่มที่ซ้ำกันเท่านั้น
-u
แสดงเฉพาะบรรทัดที่ไม่ซ้ำ

ตัวอย่างการใช้งาน

ลบรายการที่ซ้ำกันที่อยู่ติดกัน

uniq ./sorted.txt

ยุบเฉพาะบรรทัดที่ซ้ำกันติดต่อกันเท่านั้น

นับบรรทัดที่เหมือนกัน

sort ./names.txt | uniq -c

การเรียงลำดับกลุ่มจะมีชื่อเท่ากัน ดังนั้นการนับเหตุการณ์จะครอบคลุมอินพุตทั้งหมด

แสดงค่าที่ซ้ำกัน

sort ./names.txt | uniq -d

เฉพาะชื่อที่เกิดขึ้นซ้ำๆ เท่านั้นที่จะถูกพิมพ์หลังจากการเรียงลำดับ

หมายเหตุและข้อจำกัด

  • เปรียบเทียบเฉพาะแถวที่อยู่ติดกัน สำหรับรายการที่แชร์ ให้ทำ sort ก่อน
  • ลำดับและแนวคิดเรื่องความเท่าเทียมกันอาจขึ้นอยู่กับสถานที่และตัวเลือกที่เลือก

คำถามทั่วไปและการแก้ไขปัญหา

เหตุใดจึงมีบรรทัดซ้ำกัน?

เปรียบเทียบเฉพาะเส้นที่เหมือนกันที่อยู่ติดกันเท่านั้น เหตุการณ์ที่แยกกันจะยังคงอยู่ เว้นแต่คุณจะจัดกลุ่มเหตุการณ์เหล่านั้นก่อนหรือใช้เครื่องมือที่มีชุดคีย์อินพุตแบบเต็ม

sort ตามด้วย uniq จะรักษาลำดับอินพุตไว้หรือไม่

ลำดับการเปลี่ยนแปลงการเรียงลำดับ หากลำดับเดิมมีความสำคัญ ให้ใช้วิธีการขจัดข้อมูลซ้ำซ้อนเพื่อรักษาลำดับและพิจารณาหน่วยความจำที่จำเป็นสำหรับชุดคีย์

ช่วยเหลือเพิ่มเติม

ตัวเลือกจะแตกต่างกันไปตามเวอร์ชันและการจำหน่าย ตรวจสอบเอกสารประกอบที่ติดตั้งด้วยคำสั่งนี้: man uniq.