Api::V1::AssetsController#update_meta_by_key (avg 11761ms, max 11928ms)

What Happened#

2026-06-11 10:44 KST 무렵 cupixworks-api (us-west-2, production) 에서 PUT /api/v1/assets/{key}/meta/prop (Api::V1::AssetsController#update_meta_by_key) 요청 2건이 평균 11.76초, 최대 11.93초로 비정상적으로 길게 처리되었다. 두 요청 모두 HTTP 200으로 성공했으나 같은 1분 창의 다른 동일 엔드포인트 요청들 (수십 ms ~ 수 백 ms) 대비 3050배 느렸다. 동일 시각대에 capture 후처리 클라이언트가 같은 엔드포인트로 다수의 Asset prop 메타 업데이트를 직렬로 보내고 있었으며, 그 중 두 건만 12초 가까이 지연된 것으로 관측된다.

Quick Facts#

Affected Teams#

영향 범위는 같은 1분 창에서 발생한 2건으로 한정 확인되었다.

Timeline#

1. 2026-06-11 10:44:30 KST — Asset update_meta_by_key 요청들이 prop 키로 평균 수십~수백 ms 수준으로 정상 처리됨 (Datadog logs).
2. 2026-06-11 10:44:50 KST — 첫 번째 slow trace 시작 (cluster first_seen 01:44:50.003Z UTC).
3. 2026-06-11 10:45:03 KST — Asset tuidvugxg8kr PUT 응답 [200] (Datadog log timestamp 01:45:03.052Z UTC) — 직전 정상 요청과 ~12s gap.
4. 2026-06-11 10:45:11 KST — Asset 87m1m2az9pcm PUT 응답 [200] (Datadog log timestamp 01:45:11.067Z UTC) — 다시 ~8s gap.
5. 2026-06-11 10:45:20 KST — 클러스터 last_seen (01:45:20.205Z UTC).
6. 2026-06-11 10:45:54-58 KST — 동일 환경에서 Pano/Pointcloud/Annotation _update_document 가 NotFound - attributes_in_database warn 다수 출력 (searchable.rb:108). Asset 엔드포인트와 직접 인과관계는 미확인이지만 같은 시간대 동일 인덱스 경로의 부하 신호.

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Actionability#