Sidekiq ล้มเหลว ไม่มีการรันงาน

หลังจากอัปเกรด GitLab เป็น 14.7 แล้ว sidekiq ไม่สามารถทำงานต่อได้ และไม่มีงานใดทำงานอยู่

งาน CI ทั้งหมดติดค้างโดยแจ้งว่างานนี้ขึ้นอยู่กับงานอัปสตรีมที่ต้องดำเนินการให้สำเร็จเพื่อให้งานนี้ทำงาน ฉันยังไม่สามารถผลักดันในสถานะนี้

เวอร์ชัน Kubernetes: 1.21.6 เวอร์ชันแผนภูมิหางเสือ: 5.7.0 (gitlab 14.7.0)

ผลลัพธ์ของ kubectl รับพ็อด

สถานะพร้อมชื่อเริ่มอายุใหม่
db-postgresql-0 1/1 ทำงาน 0 19 ชม
gitlab-gitaly-0 1/1 วิ่ง 0 6h8m
gitlab-gitlab-exporter-74669c96b7-d7wpz 1/1 วิ่ง 0 6h9m
gitlab-gitlab-pages-657d7f6ffc-d9vlt 1/1 วิ่ง 0 6h9m
gitlab-gitlab-runner-75b77988c8-g2q88 1/1 วิ่ง 5 6h9m
gitlab-gitlab-shell-5d64558c69-gzjsz 1/1 วิ่ง 0 6h9m
gitlab-gitlab-shell-5d64558c69-j45qg 1/1 ทำงาน 0 6h3m
gitlab-gitlab-upgrade-check-gfjql 0/1 เสร็จสิ้น 0 3h53m
gitlab-migrations-14-x8g8m 0/1 เสร็จสิ้น 4 4h15m
gitlab-minio-864888b9fb-2rmmn 1/1 วิ่ง 7 6h9m
gitlab-minio-create-buckets-14-fqkbc 0/1 เสร็จสิ้น 0 4h15m
gitlab-prometheus-server-5b47c879b4-p7k4h 2/2 กำลังทำงาน 0 19h
gitlab-registry-b6f64686b-jrn8v 1/1 วิ่ง 6 6h9m
gitlab-shared-secrets-13-jl6-l8cbj 0/1 เสร็จสิ้น 0 5h7m
gitlab-shared-secrets-15-awv-mtqzf 0/1 เสร็จสิ้น 0 3h53m
gitlab-sidekiq-all-in-1-v2-ff654dcd9-n88fh 0/1 วิ่ง 12 55m
gitlab-toolbox-7bd697cb59-nrpcv 1/1 ทำงาน 0 6h9m
gitlab-webservice-default-6f67f58788-dmvnw 2/2 วิ่ง 8 6h9m
gitlab-webservice-default-6f67f58788-tfwh8 2/2 กำลังทำงาน 16 5h42m
redis-master-0 1/1 วิ่ง 1 19 ชม

บรรทัดสุดท้ายจากคอนเทนเนอร์ sidekiq

ขอบเขตการสร้าง :order_name_asc. เขียนทับวิธีการที่มีอยู่ Label.order_name_asc
ขอบเขตการสร้าง :order_name_desc. เขียนทับวิธีการที่มีอยู่ Label.order_name_desc
2022-01-28T21:35:42.947Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :open. เขียนทับวิธีการที่มีอยู่ ExternalPullRequest.open
การสร้างขอบเขต :open. เขียนทับวิธีการที่มีอยู่ ExternalPullRequest.open
2022-01-28T21:35:43.563Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :order_name_asc. เขียนทับเมธอด Member.order_name_asc ที่มีอยู่
2022-01-28T21:35:43.564Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :order_name_desc. เขียนทับเมธอด Member.order_name_desc ที่มีอยู่
2022-01-28T21:35:43.914Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :with_logging_info.เขียนทับวิธีการที่มีอยู่ PagesDomain.with_logging_info
ขอบเขตการสร้าง :order_name_asc. เขียนทับเมธอด Member.order_name_asc ที่มีอยู่
ขอบเขตการสร้าง :order_name_desc. เขียนทับเมธอด Member.order_name_desc ที่มีอยู่
การสร้างขอบเขต :with_logging_info. เขียนทับวิธีการที่มีอยู่ PagesDomain.with_logging_info
2022-01-28T21:35:44.564Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :system. เขียนทับวิธีการที่มีอยู่ PrometheusMetric.system
การสร้างขอบเขต :system. เขียนทับวิธีการที่มีอยู่ PrometheusMetric.system
2022-01-28T21:35:45.568Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :with_user. เขียนทับวิธีการที่มีอยู่ GroupMember.with_user
2022-01-28T21:35:45.579Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :reporters เขียนทับวิธีการที่มีอยู่ GroupMember.reporters
2022-01-28T21:35:45.580Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :guests. เขียนทับวิธีการที่มีอยู่ GroupMember.guests
กำลังสร้างขอบเขต :with_user. เขียนทับวิธีการที่มีอยู่ GroupMember.with_user
การสร้างขอบเขต :reporters. เขียนทับวิธีการที่มีอยู่ GroupMember.reporters
การสร้างขอบเขต :guests. เขียนทับวิธีการที่มีอยู่ GroupMember.guests
2022-01-28T21:35:47.612Z pid=22 tid=9k6 WARN: กำลังสร้างขอบเขต :extended. เขียนทับวิธีการที่มีอยู่ GitlabSubscription.extended
การสร้างขอบเขต : ขยาย เขียนทับวิธีการที่มีอยู่ GitlabSubscription.extended
2022-01-28T21:35:51.276Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :without_statuses เขียนทับวิธีการที่มีอยู่ Ci::Stage.without_statuses
2022-01-28T21:35:51.279Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :created. เขียนทับวิธีการที่มีอยู่ Ci::Stage.created
2022-01-28T21:35:51.280Z pid=22 tid=9k6 คำเตือน: การสร้างขอบเขต :รอดำเนินการ เขียนทับวิธีการที่มีอยู่ Ci::Stage.pending
2022-01-28T21:35:51.281Z pid=22 tid=9k6 WARN: กำลังสร้างขอบเขต :running. เขียนทับวิธีการที่มีอยู่ Ci::Stage.running
2022-01-28T21:35:51.282Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :สำเร็จ เขียนทับวิธีการที่มีอยู่ Ci::Stage.success
2022-01-28T21:35:51.283Z pid=22 tid=9k6 คำเตือน: การสร้างขอบเขต:ล้มเหลว เขียนทับวิธีการที่มีอยู่ Ci::Stage.failed
2022-01-28T21:35:51.284Z pid=22 tid=9k6 คำเตือน: การสร้างขอบเขต :ยกเลิก เขียนทับวิธีการที่มีอยู่ Ci::Stage.cancelled
2022-01-28T21:35:51.284Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :ข้าม เขียนทับวิธีการที่มีอยู่ Ci::Stage.skipped
2022-01-28T21:35:51.285Z pid=22 tid=9k6 คำเตือน: การสร้างขอบเขต :manual. เขียนทับวิธีการที่มีอยู่ Ci::Stage.manual
2022-01-28T21:35:51.293Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :scheduled เขียนทับวิธีการที่มีอยู่ Ci::Stage.scheduled
2022-01-28T21:35:51.294Z pid=22 tid=9k6 คำเตือน: การสร้างขอบเขต :การเตรียมการ เขียนทับวิธีการที่มีอยู่ Ci::Stage.preparing
2022-01-28T21:35:51.296Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :waiting_for_resource เขียนทับวิธีการที่มีอยู่ Ci::Stage.waiting_for_resource
2022-01-28T21:35:51.680Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :database. เขียนทับวิธีการที่มีอยู่ Ci::BuildTraceChunk.database
การสร้างขอบเขต :without_statuses เขียนทับวิธีการที่มีอยู่ Ci::Stage.without_statuses
การสร้างขอบเขต :created. เขียนทับวิธีการที่มีอยู่ Ci::Stage.created
กำลังสร้างขอบเขต : อยู่ระหว่างดำเนินการ เขียนทับวิธีการที่มีอยู่ Ci::Stage.pending
การสร้างขอบเขต :running. เขียนทับวิธีการที่มีอยู่ Ci::Stage.running
การสร้างขอบเขต : ความสำเร็จ เขียนทับวิธีการที่มีอยู่ Ci::Stage.success
การสร้างขอบเขต: ล้มเหลว เขียนทับวิธีการที่มีอยู่ Ci::Stage.failed
กำลังสร้างขอบเขต :ยกเลิก เขียนทับวิธีการที่มีอยู่ Ci::Stage.cancelled
การสร้างขอบเขต :ข้าม เขียนทับวิธีการที่มีอยู่ Ci::Stage.skipped
การสร้างขอบเขต :manual. เขียนทับวิธีการที่มีอยู่ Ci::Stage.manual
การสร้างขอบเขต :scheduled. เขียนทับวิธีการที่มีอยู่ Ci::Stage.scheduled
การสร้างขอบเขต : การจัดเตรียม เขียนทับวิธีการที่มีอยู่ Ci::Stage.preparing
กำลังสร้างขอบเขต :waiting_for_resource. เขียนทับวิธีการที่มีอยู่ Ci::Stage.waiting_for_resource
ขอบเขตการสร้าง :database.เขียนทับวิธีการที่มีอยู่ Ci::BuildTraceChunk.database
2022-01-28T21:35:59.333Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :approved_by_committer เขียนทับวิธีการที่มีอยู่ MergeRequests::ComplianceViolation.approved_by_committer
2022-01-28T21:35:59.508Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :runnable_schedules เขียนทับวิธีการที่มีอยู่ Security::OrchestrationPolicyRuleSchedule.runnable_schedules
กำลังสร้างขอบเขต :approved_by_committer เขียนทับวิธีการที่มีอยู่ MergeRequests::ComplianceViolation.approved_by_committer
การสร้างขอบเขต :runnable_schedules เขียนทับวิธีการที่มีอยู่ Security::OrchestrationPolicyRuleSchedule.runnable_schedules
2022-01-28T21:36:06.992Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :regular. เขียนทับวิธีการที่มีอยู่ EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.regular
2022-01-28T21:36:06.994Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :code_owner. เขียนทับวิธีการที่มีอยู่ EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.code_owner
การสร้างขอบเขต :regular. เขียนทับวิธีการที่มีอยู่ EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.regular
การสร้างขอบเขต :code_owner. เขียนทับวิธีการที่มีอยู่ EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.code_owner
2022-01-28T21:36:21.933Z pid=22 tid=9k6 คำเตือน: กำลังสร้างขอบเขต :system. เขียนทับวิธีการที่มีอยู่ Gitlab::DatabaseImporters::CommonMetrics::PrometheusMetric.system
การสร้างขอบเขต :system. เขียนทับวิธีการที่มีอยู่ Gitlab::DatabaseImporters::CommonMetrics::PrometheusMetric.system
{"severity":"INFO","time":"2022-01-28T21:36:58.434Z","message":"พนักงานเลิกจ้าง ปิดคลัสเตอร์"}