Rails worker saturation from concurrent bulk uploads
Service
cupixworks-api
Occurrences
2
Status
Reported
Confidence
85%
Actionability
28%
Cluster ID
4bc4a6bb-c329-449b-8ed4-28272df1eae5
First Seen
2026-06-03 22:15 UTC
Last Seen
2026-06-03 22:31 UTC
Datadog
SlackActions
Rails worker saturation from concurrent bulk uploads
What Happened#
2026-06-04 07:31 KST에 cupixworks-api의 Api::V1::AssetsController#download 엔드포인트에서 3427ms의 응답 지연이 감지되었다. us-west-2 리전에서 발생하였으며, 동일 시간대에 해당 리전 전반에 걸친 API 서버 혼잡이 확인되었다.
Quick Facts#
| Field | Value |
|---|---|
| resource_name | Api::V1::AssetsController#download |
| HTTP status | 302 (redirect) |
| duration | 3424.9ms |
| db_time | 195.96ms |
| top_frame | app/controllers/api/v1/assets_controller.rb:51 |
| env | production, us-west-2 |
Affected Teams#
| Team / Domain | Error Count | Impact |
|---|---|---|
| cupixworks-api (us-west-2) | 50+ slow requests | Asset download 응답 지연으로 자동화 클라이언트 및 사용자의 파일 다운로드 대기 시간 증가 |
Timeline#
- 2026-06-04 07:07 KST — us-west-2 리전에서 slow download 요청 시작 (첫 번째 >3000ms 요청 감지)
- 2026-06-04 07:10 KST — 최대 지연 4701ms 기록 (asset
hdmyaith3ybf) - 2026-06-04 07:31 KST — 본 클러스터의 대표 trace 발생 (3424.9ms, asset
1fnqt8vzwq3h) - 2026-06-04 07:52 KST — 관련 NotificationService 에러 발생 (별도 이슈)
- 2026-06-04 16:04 KST — RCA 수행
Scoring#
Confidence 85% · Actionability 28%
Confidence#
| Dimension | Score | Detail |
|---|---|---|
| Evidence completeness | 5/5 | 8 code refs, 6 log queries |
| Code path explicitness | 3/3 | 8 file:line refs |
| Log evidence | 3/3 | section, query, pattern |
| RCA structure | 3/3 | 3/3 sections |
| Revision history | 0/3 | 0 revision(s) |
| Agent execution | 3/3 | success |
Actionability#
| Dimension | Score | Detail |
|---|---|---|
| Fix complexity | 1/5 | critical |
| Affected files | 1/5 | 12 file(s) |
| Single repo | 1/3 | 5 service(s) |
| Immediate actions | 0/3 | absent |
| Testability | 0/3 | no test info |
| External dependency | 1/3 | external deps found |
| Data migration | 3/3 | no migration |