ES /docs

BaseService::handlingMessageErrors | sqsMessage - {"MessageId":"29feac74-a0ed-4837-bd3b-ec22ee9b6cdd

Service
cupixworks-capture-preprocessor-agent
Occurrences
1
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
b5fd4b36-1d24-44ea-802c-c0c9380a8413
First Seen
2026-08-06 10:57 UTC
Last Seen
2026-08-06 10:57 UTC
Datadog↗ Slack↗
Actions

BaseService::handlingMessageErrors | sqsMessage - {"MessageId":"29feac74-a0ed-4837-bd3b-ec22ee9b6cdd

What Happened#

2026-08-06, production 의 capture-preprocessor-agent 가 team southlandind 의 video capture (job 749769, capture 708445) 를 처리하던 중 /tmp/workspace 디스크 부족으로 원본 .insv 파일 복사에 실패했다. 실패한 message 는 SQS 로 반환되어 9 회까지 재처리되었고, 매 재시도마다 동일한 ENOSPC 로 종료됐다. 같은 원인의 실패가 14일 창에서 4개의 서로 다른 capture 에 걸쳐 138건 관측됐다.

Quick Facts#

Field Value
exception.class Error (Node.js system error, code: "ENOSPC", errno: -28)
exception.message ENOSPC: no space left on device, copyfile '/tmp/workspace/749769/videos/708445/original/708445.insv' -> '/tmp/workspace/749769/supported_videos/VID_20260803_094123_00_004.insv'
top_frame PreprocessorService.checkSupportedVideo (preprocessor-service.ts:846 fs.copyFileSync)
syscall copyfile
runtime Node.js agent, workspace /tmp/workspace (컨테이너 ephemeral disk)
env production, us-west-2

Affected Teams#

Team / Domain Error Count Impact
southlandind 138 ENOSPC 이벤트 (14d, 4 captures) 해당 video capture 들의 preprocessor action 이 완료되지 못하고 반복 실패

에러 로그에서 확인된 team 은 southlandind 하나이며, 실패한 capture 는 706551, 706595, 707510, 708445 4개다.

Timeline#

  1. 2026-08-06 19:17 KST — job 749769 message 재시도 시작 (ApproximateReceiveCount:1), checkSupportedVideo 에서 첫 ENOSPC 발생.
  2. 2026-08-06 19:57 KST — 클러스터 대표 로그 기록 (ApproximateReceiveCount:9), 동일 지점에서 반복 실패.
  3. 2026-08-06 19:57 KST — first_seen = last_seen (collector 가 이 시점 샘플을 클러스터로 수집).

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Dimension Score Detail
Evidence completeness 5/5 23 code refs, 5 log queries
Code path explicitness 3/3 23 file:line refs
Log evidence 3/3 section, query, pattern
RCA structure 3/3 3/3 sections
Revision history 0/3 0 revision(s)
Agent execution 3/3 success

Actionability#

Dimension Score Detail
Fix complexity 1/5 critical
Affected files 1/5 12 file(s)
Single repo 1/3 4 service(s)
Immediate actions 0/3 absent
Testability 0/3 no test info
External dependency 1/3 external deps found
Data migration 3/3 no migration