PixGenieProcess::execute | failed - {"code":"ABORT_ERR","name":"AbortError"}

What Happened#

2026-07-02 22:52 KST 에 cupixworks-pano-postprocessor-instance 서비스에서 tenant cana capture 724274 를 처리하던 4개의 인스턴스가 동시에 PixGenieProcess::execute 단계에서 AbortError(code ABORT_ERR) 로 실패했다. 원인은 PixGenieProcess 내부의 하드코딩된 2 시간(TIMEOUT_MS = 2 * 60 * 60 * 1000) AbortSignal.timeout 이 만료되어 자식 Python 프로세스에 SIGTERM 을 발송했기 때문이다. 4건 모두 동일 capture 를 처리 중이던 서로 다른 호스트에서 발생했으며, 결과적으로 해당 capture 의 PixGenie 전처리가 완료되지 못했다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-07-02 20:52:33 KST — PixGenieProcess::execute | begin - captureId: 724274 (4개 인스턴스가 동시에 시작; UTC 11:52:33)
2. 2026-07-02 20:52:39 KST — pixgenieutil version: 0.3.3_... — Python 프로세스 정상 기동
3. 2026-07-02 20:52:44 KST — clusters/panos/pointclouds 진행 로그 확인 (Python 정상 처리 중)
4. 2026-07-02 22:52:33 KST — 정확히 2 시간 경과, AbortSignal.timeout 만료 → _abortController.abort(new Error('Process timeout')) 호출
5. 2026-07-02 22:52:33 KST — Python 자식 프로세스가 SIGTERM(15) 을 수신, g3log FATAL SIGNAL 스택덤프 남김
6. 2026-07-02 22:52:33 KST — Node.js abortChildProcess 가 spawn Promise 를 AbortError 로 reject → PixGenieProcess::execute | failed - {"code":"ABORT_ERR","name":"AbortError"} (Datadog 에 기록된 대표 에러)
7. 2026-07-02 22:52:33 KST — PreprocessorService::run catch 블록이 PixGenieState.Error 로 상태 업데이트, FileSystemManager::cleanupWorkspace 실행
8. 2026-07-02 22:52:34 KST — PreprocessorService::run | end - {"stack":"AbortError: The operation was aborted...","cause":{"message":"Process timeout"...}} 상세 스택 로깅

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Actionability#