CopyRequest async worker race — enqueue before transaction commit

What Happened#

2026-07-09 21:00 KST, cupixworks-worker Sidekiq queue data_changes 에서 BulkSavePartialJsonToFileWorker 가 방금 insert_all! 로 생성된 19 개의 Cluster 레코드(id 127698–127716)를 6 회 재시도(총 ~6.3 초) 동안 DB 에서 찾지 못하고 실패했다. 동일 시점에 12 개 이상의 다른 모델(Category, Review, Room, Bim, Pointcloud, AnnotationLayer, BimRevision 등)에서 같은 패턴이 관측되어 svc:cupixworks-worker::unknown 스코프의 서비스 저하 인시던트가 열렸다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-07-09 21:00:37 KST — BulkSavePartialJsonToFileWorker#perform 시작, 첫 번째 where(id: ids).count != ids.count 관측 → Retry 1 (delay 0.1s)
2. 2026-07-09 21:00:37 KST — Retry 2 (0.2s), Retry 3 (0.4s), Retry 4 (0.8s) 연속 실패
3. 2026-07-09 21:00:39 KST — Retry 5 (1.6s), Retry 6 (3.2s) 실패
4. 2026-07-09 21:00:43 KST — 6 회 재시도 모두 실패, error 로그 기록 후 return false (첫/마지막 발생, cluster first_seen/last_seen)
5. 2026-07-09 21:00:45 KST — CopyRequest#bulk_index_document 가 동일 id 범위(127698–127728) 를 index 처리 (class:CopyRequest, bulk_index_document of Cluster(127698-127728) 0 batches finished) — 이 시점에 부모 트랜잭션이 커밋됨을 시사

Scoring#

Confidence 80% · Actionability 28%

Confidence#

Actionability#