Api::V1::PanosController#stitched (avg 14954ms, max 15806ms)
Service
cupixworks-api
Occurrences
190
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
85c0f2b3-a61a-4ad4-97f0-f3d3377c6d89
First Seen
2026-06-29 07:48 UTC
Last Seen
2026-08-04 22:22 UTC
Actions
Api::V1::PanosController#stitched (avg 14954ms, max 15806ms)
What Happened#
2026-06-29 16:48 KST에 cupixworks-api(us-west-2) 서비스의 PUT /api/v1/panos/:id/stitched 엔드포인트에서 평균 14.9초, 최대 15.8초에 달하는 지연이 3건 발생했다. 동일 시점에 cupix-agent가 동일 capture의 다수 pano에 대해 stitched 호출을 동시에 보내는 패턴이 관찰되었고, 로그상 db 시간만으로도 3.8~6.5초가 소비되었다. 응답은 HTTP 400 STAT10000 Pano already stitched (이미 stitched 상태인 pano에 대한 멱등 호출)로 종료되었다.
Quick Facts#
| Field | Value |
|---|---|
| resource_name | Api::V1::PanosController#stitched |
| top_frame | app/repositories/pano_repository.rb:38 |
| http.method | PUT |
| http.status_code | 400 (representative slow samples) |
| env | production, region us-west-2 |
| tenant | cupix, team flintco (id 887) |
| user_agent | cupix-agent |
| deploy | production-us-west-2-20260626t0223z0-bfdc5ebd-cupixworks |
Affected Teams#
| Team / Domain | Error Count | Impact |
|---|---|---|
flintco (team_id 887) |
3 | cupix-agent가 stitched 처리 후 호출하는 후속 stitched 확인이 15초까지 지연되어 agent 측 job 처리 속도가 저하됨 |
Timeline#
- 2026-06-29 16:48 KST — 첫 지연 span 기록 (
first_seen07:48:44 UTC). 동일 capture의 여러 pano에 대해 cupix-agent가 stitched 호출을 동시 발사. - 2026-06-29 16:48 KST — 마지막 지연 span 기록 (
last_seen07:48:44 UTC). - 2026-06-29 16:49 KST — 동일 패턴의 슬로 요청 3건이 13.6~15.7s 소요 후 HTTP 400
Pano already stitched로 종료 (Datadog 로그 07:49:01.037Z, request_idf30193cc-eb24-4dad-b3a7-7671cb279f21등).
Scoring#
Confidence 85% · Actionability 28%
Confidence#
| Dimension | Score | Detail |
|---|---|---|
| Evidence completeness | 5/5 | 18 code refs, 8 log queries |
| Code path explicitness | 3/3 | 18 file:line refs |
| Log evidence | 3/3 | section, query, pattern |
| RCA structure | 3/3 | 3/3 sections |
| Revision history | 0/3 | 0 revision(s) |
| Agent execution | 3/3 | success |
Actionability#
| Dimension | Score | Detail |
|---|---|---|
| Fix complexity | 1/5 | critical |
| Affected files | 1/5 | 31 file(s) |
| Single repo | 1/3 | 4 service(s) |
| Immediate actions | 0/3 | absent |
| Testability | 0/3 | no test info |
| External dependency | 1/3 | external deps found |
| Data migration | 3/3 | no migration |