ลบบรรทัดที่ซ้ำกันคืออะไร?

เครื่องมือออนไลน์ฟรีสำหรับลบบรรทัดที่ซ้ำกันออกจากข้อความอย่างรวดเร็ว พร้อมตัวเลือกเก็บบรรทัดว่างไว้

บรรทัดที่ซ้ำกันในข้อมูลข้อความทำให้การนับไม่แม่นยำ ขนาดไฟล์บวม และการวิเคราะห์ไม่น่าเชื่อถือ เครื่องมือลบบรรทัดซ้ำให้สามโหมดการทำงาน — ลบบรรทัดซ้ำ คงเฉพาะบรรทัดที่ไม่ซ้ำ หรือค้นหาบรรทัดที่ซ้ำ — พร้อมตัวเลือกความไวต่อตัวพิมพ์เล็กใหญ่และการตัดช่องว่างเพื่อจัดการความหลากหลายของข้อความจริง

ในโหมดลบบรรทัดซ้ำ เครื่องมือสแกนข้อความอินพุตและเก็บเฉพาะการปรากฏครั้งแรกของแต่ละบรรทัด โดยลบการซ้ำที่ตามมา ลำดับบรรทัดดั้งเดิมจะถูกรักษาไว้ นี่เป็นโหมดที่ใช้บ่อยที่สุดสำหรับการทำความสะอาดข้อมูลที่นำเข้า การรวมรายการ หรือการลบอีเมลซ้ำ โหมดคงเฉพาะบรรทัดที่ไม่ซ้ำไปไกลกว่านั้นโดยการลบบรรทัดทั้งหมดที่ปรากฏมากกว่าหนึ่งครั้ง โดยคงเฉพาะบรรทัดที่ปรากฏครั้งเดียวพอดี มีประโยชน์สำหรับการค้นหารายการที่ไม่ซ้ำในชุดข้อมูล — ตัวอย่างเช่น การระบุว่าที่อยู่อีเมลใดในรายการเป็นของคนเพียงคนเดียว

โหมดค้นหาบรรทัดซ้ำทำตรงกันข้าม: มันแสดงเฉพาะบรรทัดที่ปรากฏมากกว่าหนึ่งครั้ง โดยไม่สนใจบรรทัดที่ปรากฏเพียงครั้งเดียว มีประโยชน์สำหรับการสืบสวนปัญหาคุณภาพข้อมูลหรือการระบุรายการซ้ำที่อาจต้องได้รับความสนใจ แต่ละโหมดแสดงสถิติจำนวนบรรทัดอินพุต บรรทัดผลลัพธ์ และบรรทัดที่ถูกลบ

สวิตช์ความไวต่อตัวพิมพ์เล็กใหญ่ควบคุมว่า "Hello" และ "hello" ถือเป็นบรรทัดเดียวกันหรือคนละบรรทัด ตัวเลือกตัดช่องว่างจะลบช่องว่างนำหน้าและท้ายบรรทัดของแต่ละบรรทัดก่อนการเปรียบเทียบ ซึ่งป้องกันการซ้ำปลอมที่เกิดจากระยะห่างที่ไม่สม่ำเสมอ — ปัญหาทั่วไปเมื่อวางข้อมูลจากแหล่งต่างกัน การประมวลผลทั้งหมดเกิดขึ้นในเครื่องและทันที