ExportWorker N+1 query in pointcloud — timeout on shutdown

• Datadog 에러 링크
• Slack 스레드

What Happened#

2026-04-23 07:20~08:15 UTC 사이, cupixworks-api 서비스의 ExportWorker가 migration id(1252)의 데이터베이스 export 작업 중 반복적으로 Sidekiq::Shutdown 예외를 수신했다. 약 5분 간격으로 Sidekiq 프로세스가 종료되면서 read_capture 단계에서 실행 중이던 MySQL 쿼리가 중단되었고, 12회 연속 실패 후 대량의 retry job이 동시에 쌓여 concurrency 충돌이 발생했다.

Quick Facts#

Timeline#

1. 07:18:43Z — ExportWorker 최초 실행 시작 (migration id 1252, facility 9168)
2. 07:20:31Z — 첫 번째 Sidekiq::Shutdown 발생 (read_capture 단계, ~2분 실행 후)
3. 07:25:27Z ~ 08:15:31Z — 약 5분 간격으로 11회 추가 Sidekiq::Shutdown 반복 (모두 read_capture 단계)
4. 08:22:19Z — 누적된 retry job들이 동시 실행되어 "sidekiq is already running" 경고 대량 발생
5. 08:22:19Z — retries exhausted 로그 없음 — job이 최종 실패 없이 retry 큐에 남아있는 상태

Scoring#

Confidence 80% · Actionability 24%

Confidence#

Actionability#