Api::V1::LevelsController#merged_voxels (avg 64491ms, max 65435ms)

What Happened#

2026-06-25 00:22 ~ 00:27 KST 동안 cupixworks-api(us-west-2) 의 Api::V1::LevelsController#merged_voxels 엔드포인트가 평균 64.5초, 최대 65.4초 latency 로 6회 응답했다. 모든 슬로우 요청은 동일한 level_id=55514(team swinerton) 을 대상으로 했으며, 응답 자체는 HTTP 302(/merge 결과 signed S3 URL 로 redirect) 로 정상 처리되었다. 지연 시간의 거의 전부는 controller 가 동기 호출하는 외부 voxel-service /merge 엔드포인트에서 소비되었다.

Quick Facts#

Affected Teams#

다른 level (72845, 13096, 72827, 55168) 의 동일 엔드포인트 호출은 같은 윈도우에서 1초 내외로 정상 처리됨 — 영향은 단일 level 에 집중.

Timeline#

1. 2026-06-25 00:20:23 KST — level_id=55514 첫 호출 (이미 슬로우 시작).
2. 2026-06-25 00:22:02 KST — first_seen. cluster 윈도우 시작, 64s 응답 다수.
3. 2026-06-25 00:23:09 ~ 00:27:22 KST — 동일 level 에 대해 6건의 64s 요청 발생 (cluster 본체).
4. 2026-06-25 00:28:22 KST — 64.4s 추가 발생 (윈도우 외).
5. 2026-06-25 00:28:35 KST — 같은 level 호출이 427ms 로 완료 — Rails Rails.cache.fetch(..., expires_in: 30.seconds) 캐시 히트로 추정됨.

Scoring#

Confidence 85% · Actionability 44%

Confidence#

Actionability#