AwsS3Manager::uploadDirectoryByCredential | upload failed - {"message":"We encountered an internal e
Service
cupixworks-pano-postprocessor-instance
Occurrences
53
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
aee7c647-f7f9-4d1d-8241-3a59b751ebca
First Seen
2026-06-24 05:00 UTC
Last Seen
2026-07-11 09:17 UTC
Datadog
SlackActions
AwsS3Manager::uploadDirectoryByCredential | upload failed - {"message":"We encountered an internal e
What Happened#
2026-06-24 14:00 KST에 cupixworks-pano-postprocessor-instance 에이전트가 리사이즈된 pano 타일을 S3에 업로드하는 중 AWS S3로부터 HTTP 500 InternalError 응답을 받아 업로드가 실패했다. AwsS3Manager.uploadDirectoryByCredential 의 내부 try/catch가 예외를 삼키기 때문에 상위 워크플로우는 실패를 인지하지 못하고 pano를 정상 완료로 처리한다. 24시간 윈도우 안에서 동일 패턴이 여러 capture에서 반복됐다.
Quick Facts#
| Field | Value |
|---|---|
| exception.class | S3 InternalError (statusCode 500, retryable:true) |
| exception.message | We encountered an internal error. Please try again. |
| top_frame | applications/agents/packages/cupix-pano-postprocessor/src/manager/aws-s3.manager.ts:130-139 |
| runtime | Node.js (aws-sdk v2, s3.upload(...).promise()) |
| env | production, region us-west-2, tenant cupix |
Affected Teams#
| Team / Domain | Error Count | Impact |
|---|---|---|
| gad (pano-postprocessor / 360 사진 파이프라인) | 본 클러스터 2건 (24h 동일 패턴 다수) | 일부 pano 타일이 S3에 누락된 채 pano-postprocess가 Done으로 종료. 프런트엔드에서 해당 pano 타일 로드 실패 가능 |
Timeline#
- 2026-06-24 14:00:06 KST — 첫 발생: requestId
JNN2Q5KZVFHY5KNW, capture postprocess 중 S3 500 InternalError 수신 (clusterfirst_seen). - 2026-06-24 14:00:06 KST — 동일 cluster 두 번째 occurrence (
occurrence_count: 2). - 2026-06-24 16:15:13 KST — 동일 에러 메시지 재발 (requestId
31BRNCNT2J71NNMA). - 2026-06-24 14:11:50 KST — 같은 서비스에서 별도 cluster
4b46df80…(MaskWork::maskPanos) 발생 → status board 가cupixworks-pano-postprocessor-instance service degraded인시던트로 묶음 (2026-06-24-svc-cupixworks-pano-postprocessor-instance--unknown-1). - 분석 시점 (2026-06-24) — RCA 작성. 외부 의존성 (AWS S3) 측 일시 장애로 추정되며, 코드 경로 상의 silent-failure 가 영향 확대 요인.
Scoring#
Confidence 85% · Actionability 28%
Confidence#
| Dimension | Score | Detail |
|---|---|---|
| Evidence completeness | 5/5 | 11 code refs, 5 log queries |
| Code path explicitness | 3/3 | 11 file:line refs |
| Log evidence | 3/3 | section, query, pattern |
| RCA structure | 3/3 | 3/3 sections |
| Revision history | 0/3 | 0 revision(s) |
| Agent execution | 3/3 | success |
Actionability#
| Dimension | Score | Detail |
|---|---|---|
| Fix complexity | 1/5 | critical |
| Affected files | 1/5 | 7 file(s) |
| Single repo | 1/3 | 6 service(s) |
| Immediate actions | 0/3 | absent |
| Testability | 0/3 | no test info |
| External dependency | 1/3 | external deps found |
| Data migration | 3/3 | no migration |