BaseRepository#search permission_joins — 13-table LEFT JOIN bottleneck

What Happened#

2026-07-03 16:33 KST에 cupixworks-api의 Api::V1::LevelsController#index 요청 한 건이 18627 ms 동안 실행되어 latency cluster로 감지되었다. 해당 요청은 HTTP 200으로 응답에 성공했지만 DB에서 7204 ms, serialization에서 1661 ms를 소비했다. 동일 시간대에 다른 controller들도 광범위하게 DB 지연을 겪고 있어 개별 endpoint 결함이 아닌 fleet-wide DB 지연 사건의 한 표본이다.

Quick Facts#

Affected Teams#

같은 시간대(07:33-07:44 UTC)에 weoneil, ellisdon, accoes 등 다른 tenant들도 DB > 3 s 요청을 다수 관측했다. cluster 스코프는 표본 1건이지만 실제 사용자 impact는 다중 tenant에 걸쳐 있다.

Timeline#

1. 2026-07-03 16:33:13 KST — 요청 시작 (finish - duration으로 역산)
2. 2026-07-03 16:33:32 KST — 요청 종료, HTTP 200 (@timestamp: 2026-07-03T07:33:32.095Z)
3. 2026-07-03 16:33 - 16:45 KST — 동일 API host들에서 DB 지연 요청 다수 관측 (duration > 30 s, db > 10 s인 요청 포함)
4. 2026-07-03 16:33 KST 이후 — error-sweeper collector가 latency cluster로 fingerprint 생성

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Actionability#