MaskWork::maskPanos | error code:1

What Happened#

2026-06-24 14:11:50 KST에 cupixworks-pano-postprocessor-instance (ap-southeast-2, production)에서 동일 capture에 대한 3개의 동시 처리 인스턴스가 모두 mask 단계에서 실패했다. 자식 프로세스로 실행된 face/body blur 스크립트 내부의 Python inference 스크립트 cupix_inference.py가 cv2.cvtColor assertion 실패 (!_src.empty())로 크래시했고, 그 결과 spawn된 bash 스크립트가 exit code 1로 종료되어 MaskWork.maskPanos가 reject(false)를 호출, PanoPostprocessorService.run이 capture state를 Error로 마킹했다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-06-24 14:08:58 KST — PanoPostprocessorService::run | begin — 3개 인스턴스가 동시에 동일 capture 처리를 시작 (Datadog: service:cupixworks-pano-postprocessor-instance "PanoPostprocessorService::run | begin").
2. 2026-06-24 14:11:49 KST — cupix_inference.py가 cv2.cvtColor assertion 실패로 stderr에 traceback 출력. mask-work.ts의 process.stderr.on('data') 핸들러가 이를 error 레벨로 로깅 (MaskWork::maskPanos | script Traceback ...).
3. 2026-06-24 14:11:50 KST — bash blur 스크립트가 exit code 1로 종료. process.on('close', code=1)가 MaskWork::maskPanos | error code:1을 로깅하고 reject(false) 호출 (3건).
4. 2026-06-24 14:11:50 KST — PanoPostprocessorService::run의 catch 블록이 capture state를 Error로 업데이트하고 run | end - false 로깅.
5. 2026-06-24 14:11:52 KST — PanoPostprocessorService::terminateService | force shutdown after 10 seconds — 정상 종료 경로.

Scoring#

Confidence 80% · Actionability 28%

Confidence#

Actionability#