ES /docs

Api::V1::Admin::CapturesController#index (avg 519016ms, max 519016ms)

Service
cupixworks-api
Occurrences
193
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
66924c5b-7d4d-4f3c-a989-021aa6995087
First Seen
2026-06-26 01:42 UTC
Last Seen
2026-08-05 01:29 UTC
Datadog↗ Slack↗
Actions

Api::V1::Admin::CapturesController#index (avg 519016ms, max 519016ms)

What Happened#

2026-06-26 10:42 KST에 cupixworks-api 서비스의 admin 엔드포인트 Api::V1::Admin::CapturesController#index 요청 한 건이 약 519초(8분 39초) 동안 실행됐다. 단일 trace(2099774284021346103)에서 발생했고 region은 ap-southeast-2, tenant는 cupix다. 동일 시간대에 panos 테이블을 대상으로 한 광범위한 InnoDB row-lock 경합이 진행 중이었고, status board는 본 cluster를 2026-06-26-svc-cupixworks-api--unknown-1 인시던트(같은 service에서 30분 윈도우 내 7개 latency cluster 묶음)에 포함시켰다.

Quick Facts#

Field Value
resource_name Api::V1::Admin::CapturesController#index
trace_id 2099774284021346103
avg_duration_ms 519016
max_duration_ms 519016
occurrence_count 1
cluster_type latency
env production, region ap-southeast-2
tenant cupix

Affected Teams#

Team / Domain Error Count Impact
cupixworks-api (admin/captures) 1 trace 단일 admin 사용자의 캡처 목록 조회가 ~519초 블로킹. 클라이언트 측 HTTP 타임아웃을 거의 확실히 초과 — 사용자에게는 사실상 실패.
cupixworks-api (전체) 7 cluster 같은 시간대(2026-06-26 10:25–10:53 KST)에 svc:cupixworks-api::unknown 인시던트로 묶인 다른 6개 latency cluster 존재 (status board id 2026-06-26-svc-cupixworks-api--unknown-1).

Timeline#

  1. 2026-06-26 10:25 KST — svc:cupixworks-api::unknown parent incident 시작 (Api::V1::PanosController#update 41.5s latency, cluster 943fdcb4).
  2. 2026-06-26 10:33:53 KST (추정) — 본 cluster 대상 요청 시작 (last_seen 10:42:32 KST − 519s).
  3. 2026-06-26 10:42:32 KST — 본 trace last_seen. APM 기준 trace 종료 시각.
  4. 2026-06-26 10:45:51 KST 이후 — panos 테이블 대상 Mysql2::Error::TimeoutError: Lock wait timeout exceeded 502 응답 다수 발생 (Datadog 로그 19건 확인). duration ≈ 50,000ms = MySQL innodb_lock_wait_timeout 기본값.
  5. 2026-06-26 10:53:30 KST — Parent incident 해소 (status board resolved_at).

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Dimension Score Detail
Evidence completeness 5/5 16 code refs, 9 log queries
Code path explicitness 3/3 16 file:line refs
Log evidence 3/3 section, query, pattern
RCA structure 3/3 3/3 sections
Revision history 0/3 0 revision(s)
Agent execution 3/3 success

Actionability#

Dimension Score Detail
Fix complexity 1/5 critical
Affected files 1/5 13 file(s)
Single repo 1/3 6 service(s)
Immediate actions 0/3 absent
Testability 0/3 no test info
External dependency 1/3 external deps found
Data migration 3/3 no migration