การโทร http ขาออกล้มเหลวแบบสุ่ม - ไม่มีเส้นทางไปยังโฮสต์

เมื่อไม่นานมานี้ เกิดปัญหาแปลกๆ ในคลัสเตอร์ kubernetes ของเรา เรามีเครือข่ายที่มีเซิร์ฟเวอร์ windows (เว็บเซิร์ฟเวอร์ เมลเซิร์ฟเวอร์ ฯลฯ) และคลัสเตอร์ kubernetes ที่รัน Rancher v2.6.0

คลัสเตอร์กำลังสื่อสารกับเซิร์ฟเวอร์ windows ผ่านคำขอ http และ smtp/imap เพื่อส่งและอ่านอีเมล ในขณะนี้ คำขอ HTTP แบบสุ่มล้มเหลวพร้อมกับข้อความแสดงข้อผิดพลาด ไม่มีเส้นทางสู่โฮสต์. ดูเหมือนว่าจะจำกัดการเชื่อมต่อภายในเครือข่ายเท่านั้น และไม่ส่งผลกระทบต่อคำขอไปยัง API ของบุคคลที่สาม และข้อผิดพลาดไม่ได้เกิดขึ้นเสมอไป คำขอจำนวนมากผ่านไปโดยไม่มีปัญหาใดๆ และบางคำขอก็ล้มเหลว ฉันใช้นโยบายการลองใหม่เพื่อลองคำขอเดิมอีกครั้งในอีกไม่กี่วินาทีต่อมา และบางครั้งก็ใช้ได้ผลในการลองใหม่ครั้งแรก บางครั้งครั้งที่สองและบางครั้งก็ใช้ไม่ได้เลย

ฉันพยายามค้นหาวิธีแก้ไขใน Google แต่คิดอะไรไม่ออก โดยเฉพาะอย่างยิ่งเนื่องจากมีเพียงร้อยละของคำขอทั้งหมดเท่านั้นที่ได้รับผลกระทบ

ผู้ดูแลระบบของเราที่ดูแลเครือข่ายและเซิร์ฟเวอร์ windows ไม่สามารถระบุปัญหาใด ๆ หรือแม้กระทั่งดูคำขอ ดังนั้นฉันเดาว่าคำขอจะไม่ออกจากคลัสเตอร์ .. ถ้ามันสมเหตุสมผล

น่าเสียดายที่คลัสเตอร์ kubernetes เคยได้รับการดูแลโดยเพื่อนร่วมงานที่ไม่สามารถใช้งานได้อีกต่อไป ฉันจะขอบคุณมากสำหรับคำแนะนำที่จะเริ่มมองหาวิธีแก้ปัญหา

ฉันมีข้อผิดพลาดที่คล้ายกันและดูเหมือนว่าจะเชื่อมโยงกับความล้มเหลวในการสืบค้น DNS Coredns ส่งต่อคำขอที่ไม่ใช่ kubernetes ไปยัง pfsense DNS และล้มเหลวแบบสุ่ม ทำให้ไม่มีเส้นทางไปยังโฮสต์ ตรวจสอบบันทึก Coredns

ฉันจะเข้าไปข้างในฝักหนึ่ง:

kubectl exec -it <podname> -n <namespace> -- ทุบตี

และเรียกใช้:

สำหรับฉันใน {0..100}; ทำ curl http://<windows.server>;done

และตรวจสอบว่ามีข้อผิดพลาดหรือไม่ หากมี - ฉันจะเรียกใช้การทดสอบเดียวกันจากโหนดเอง (ssh ไปยังโหนดและเรียกใช้ for loop) โดยเฉพาะอย่างยิ่งโหนดเดียวกันกับที่พ็อดที่คุณใช้สำหรับการทดสอบทำงานอยู่

หากคุณยังคงเห็นข้อผิดพลาดหรือหมดเวลา ฉันจะ ssh ไปยังโหนดนอกคลัสเตอร์และรันการทดสอบเดียวกัน เพื่อลองและโฟกัสว่าปัญหาเกิดจากพ็อดเท่านั้น จากโหนดคลัสเตอร์ หรือกับเซิร์ฟเวอร์ windows