Api::V1::PanosController#update (avg 41485ms, max 41485ms)

What Happened#

2026-06-26 10:25 KST 경 cupixworks-api 의 ap-southeast-2 (Sydney) 환경에서 PUT /api/v1/panos/14131203 한 건이 41.485초 동안 처리되었다. 동일 윈도우에서 동일 facility(record_id 14130xxx / 14131xxx) 의 panos 가 대량 동시 생성·수정되는 burst 트래픽이 관측되었으며, 해당 한 건만 outlier 로 잡혀 single-occurrence latency cluster 가 생성되었다. 응답은 200 OK 로 성공했고, 같은 trace 안에서 에러는 없다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-06-26 10:25:30 KST — 같은 facility 의 panos 가 burst 로 생성/업데이트되기 시작 (POST /api/v1/panos, PUT /api/v1/panos/14130xxx-14131xxx).
2. 2026-06-26 10:25:42 KST (approx.) — PUT /api/v1/panos/14131203 요청 시작 (avg_duration_ms 41485 역산).
3. 2026-06-26 10:25:34 KST — APM span 의 cluster first_seen 타임스탬프 (trace 시작 근처, span 집계 시점).
4. 2026-06-26 10:26:20 KST — 동일 trace 의 Cupix::EventService.publish_event 로그 (Published event - failed_record_count: 0 / 1).
5. 2026-06-26 10:26:23 KST — [200] PUT /api/v1/panos/14131203 (Api::V1::PanosController#update) 완료.
6. 2026-06-26 10:26:55–10:26:59 KST — 직후 Pano/Group/ElementTrace 의 _update_document 가 attributes_in_database 빈 상태로 다수 호출되어 NotFound - attributes_in_database warn 로그 폭증.

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Actionability#