Api::V1::PanosController#create (avg 11520ms, max 11520ms)

What Happened#

2026-06-25 00:04 KST부터 02:43 KST 사이에 cupixworks-api의 Api::V1::PanosController#create 요청이 평균 11.6초 (최대 15.5초)로 느려진 latency 클러스터 26건이 관측되었다. 모든 요청은 HTTP 200으로 정상 응답했고, 같은 시간대에 cupixworks-api 전체 평균 request duration도 평소 0.4–0.7초에서 2.5–4.7초로 동반 상승했다. 동일 시간대에 동일 service::unknown 스코프의 다른 6개 클러스터가 함께 incident 2026-06-24-svc-cupixworks-api--unknown-2로 묶여 있다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-06-25 00:04 KST — Api::V1::PanosController#create 첫 slow span 발생 (cluster first_seen)
2. 2026-06-25 00:00–00:05 KST (UTC 15:00–15:05) — 서비스 전체 평균 duration 2.77s/2.52s, 요청률 132 req/s (평소 50 req/s) 로 1차 spike
3. 2026-06-25 01:45 KST 부터 — incident 2026-06-24-svc-cupixworks-api--unknown-2 open (다른 클러스터 동시 발생)
4. 2026-06-25 02:35–02:40 KST (UTC 17:35–17:40) — 서비스 전체 평균 duration 2.65s/4.75s 로 2차 spike, CPU 11–12%
5. 2026-06-25 02:43 KST — 본 클러스터 last_seen (마지막 slow span)
6. 2026-06-25 02:59 KST — incident resolved (status board 기록)

Scoring#

Confidence 85% · Actionability 40%

Confidence#

Actionability#