ES /docs

Api::V1::PanosController#stitched (avg 14954ms, max 15806ms)

Service
cupixworks-api
Occurrences
190
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
85c0f2b3-a61a-4ad4-97f0-f3d3377c6d89
First Seen
2026-06-29 07:48 UTC
Last Seen
2026-08-04 22:22 UTC
Actions

Api::V1::PanosController#stitched (avg 14954ms, max 15806ms)

What Happened#

2026-06-29 16:48 KST에 cupixworks-api(us-west-2) 서비스의 PUT /api/v1/panos/:id/stitched 엔드포인트에서 평균 14.9초, 최대 15.8초에 달하는 지연이 3건 발생했다. 동일 시점에 cupix-agent가 동일 capture의 다수 pano에 대해 stitched 호출을 동시에 보내는 패턴이 관찰되었고, 로그상 db 시간만으로도 3.8~6.5초가 소비되었다. 응답은 HTTP 400 STAT10000 Pano already stitched (이미 stitched 상태인 pano에 대한 멱등 호출)로 종료되었다.

Quick Facts#

Field Value
resource_name Api::V1::PanosController#stitched
top_frame app/repositories/pano_repository.rb:38
http.method PUT
http.status_code 400 (representative slow samples)
env production, region us-west-2
tenant cupix, team flintco (id 887)
user_agent cupix-agent
deploy production-us-west-2-20260626t0223z0-bfdc5ebd-cupixworks

Affected Teams#

Team / Domain Error Count Impact
flintco (team_id 887) 3 cupix-agent가 stitched 처리 후 호출하는 후속 stitched 확인이 15초까지 지연되어 agent 측 job 처리 속도가 저하됨

Timeline#

  1. 2026-06-29 16:48 KST — 첫 지연 span 기록 (first_seen 07:48:44 UTC). 동일 capture의 여러 pano에 대해 cupix-agent가 stitched 호출을 동시 발사.
  2. 2026-06-29 16:48 KST — 마지막 지연 span 기록 (last_seen 07:48:44 UTC).
  3. 2026-06-29 16:49 KST — 동일 패턴의 슬로 요청 3건이 13.6~15.7s 소요 후 HTTP 400 Pano already stitched로 종료 (Datadog 로그 07:49:01.037Z, request_id f30193cc-eb24-4dad-b3a7-7671cb279f21 등).

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Dimension Score Detail
Evidence completeness 5/5 18 code refs, 8 log queries
Code path explicitness 3/3 18 file:line refs
Log evidence 3/3 section, query, pattern
RCA structure 3/3 3/3 sections
Revision history 0/3 0 revision(s)
Agent execution 3/3 success

Actionability#

Dimension Score Detail
Fix complexity 1/5 critical
Affected files 1/5 31 file(s)
Single repo 1/3 4 service(s)
Immediate actions 0/3 absent
Testability 0/3 no test info
External dependency 1/3 external deps found
Data migration 3/3 no migration