ฉันจะรวมสองไฟล์โดยไม่รวมบรรทัดที่มีอยู่ในทั้งสองไฟล์ได้อย่างไร

ฉันมี 2 ไฟล์ที่ไม่สามารถจัดเรียงได้ ทั้งคู่มีรายการคำต่อบรรทัด ฉันกำลังพยายามเปรียบเทียบทั้งสองไฟล์และสร้างไฟล์ใหม่ ปราศจาก บรรทัดที่ซ้ำกันที่จับคู่ระหว่างทั้งสองไฟล์ ซึ่งหมายความว่า หากพบบรรทัดในไฟล์ A ในไฟล์ B ก็ไม่ควรแสดงเป็นผลลัพธ์เอาต์พุต

มีปัญหาใหญ่เกี่ยวกับคำถามและไซต์มากมายที่กล่าวถึงในชื่อเรื่องว่า "การลบรายการที่ซ้ำกัน" ทั้งที่ความจริงแล้วมันคือ "การรวมรายการที่ซ้ำกันและการแสดงรายการที่ไม่ซ้ำ" 2 จุดนี้ต่างกันมาก หนึ่งไม่ได้เป็นการลบบรรทัดที่ซ้ำกัน แต่เป็นการรวมเข้าด้วยกันเท่านั้น

สำหรับกรณีนี้ ฉันจำเป็นต้องลบทิ้งจริงๆ ดังนั้นหากพบในทั้งสองไฟล์จะไม่แสดงเป็นผลลัพธ์

ฉันได้ทดสอบ การสื่อสาร แล้วและสิ่งนี้ล้มเหลว ฉันได้ทดสอบกรณีอื่น ๆ เช่น awk, grep ที่ฉันได้เห็น กฎสำหรับทั้งสองไฟล์มีดังต่อไปนี้:

• มีขนาดต่างกัน (ห้ามมีจำนวนเส้นเท่ากัน)
• หากต้องการทำซ้ำ จะเปรียบเทียบทั้งบรรทัดกับแต่ละบรรทัดและบรรทัดอื่นๆ ทั้งหมดในไฟล์อื่น
• ไม่สามารถจัดเรียงไฟล์ได้

นี่คือข้อมูลบางอย่างเกี่ยวกับไฟล์ พวกเขามีรายการอีเมล หนึ่งอีเมลต่อบรรทัด แน่นอนว่าเนื่องจากขนาดไม่เท่ากัน ไม่ได้หมายความว่าจะมีอีเมลทั้งหมดเหมือนกัน แต่มีอีเมลที่ไม่ซ้ำกันทั้งหมดอยู่ภายใน เป็นเพียงว่าอีเมลบางฉบับอาจอยู่ในทั้งสองไฟล์ สำหรับกรณีที่อีเมลอยู่ในทั้งสองไฟล์ ผลลัพธ์ที่ออกมาไม่ควรแสดงอีเมลเหล่านั้น

มีวิธีที่มีประสิทธิภาพมากกว่า แต่นี่คือ ก สารละลาย. ฉันไม่แน่ใจว่าคุณต้องการรวมไฟล์อย่างไร ดังนั้น ในโซลูชันนี้ บรรทัดที่แตกต่างจากไฟล์ 1 จะถูกเขียนไปยังไฟล์ใหม่ จากนั้นบรรทัดที่แตกต่างจากไฟล์ 2 จะถูกเขียนไปยังไฟล์ใหม่

#remove_dupes.py
จาก sys นำเข้า argv

infile1 = เปิด ( str(argv[1]), "r" )
infile2 = เปิด ( str(argv[2]), "r" )
พยายาม:
    outfile = เปิด ( str (argv [3]), "w" )
ยกเว้น (IndexError):
    outfile = เปิด ( 'ออก', "w" )


if1_arr = infile1.readlines()
if2_arr = infile2.readlines()
tmp_arr = if2_arr



ยกเว้น = []
สำหรับบรรทัดใน if1_arr:
    ถ้าบรรทัดใน if2_arr:
        ไม่รวม ต่อท้าย (บรรทัด)
    อื่น:
        outfile.write(บรรทัด)

สำหรับบรรทัดใน if2_arr:
    ถ้าบรรทัดไม่รวม:
        outfile.write(บรรทัด)

infile1.close()
infile2.close()
outfile.close()

วิ่ง:

python3 remove_dupes.py <file1> <file2> <output_file>

หากคุณต้องการเปลี่ยนสิ่งนี้ให้เป็นเครื่องมือบรรทัดคำสั่งที่รวดเร็วขึ้น ให้ย้ายสคริปต์ไปยังตำแหน่งระยะยาวและเพิ่มบรรทัดต่อไปนี้ในไฟล์ .bashrc, .bash_aliases, .zshrc หรือเทียบเท่า

นามแฝง mydiff='python3 <path_to_script> '

คุณสามารถแทนที่ 'mydiff' ด้วยสิ่งที่คุณต้องการเรียก หลังจากนั้นคุณสามารถเรียกใช้สคริปต์ด้วย:

mydiff <file1> <file2> <เอาต์พุต_ไฟล์>