QMAws::startTask | ECS failures - job_id: 90459, task_definition: cupix-skat-master-production-arm,

RCA Summary#

ECS container instance c6a22b33f1b64addbe150be3df88cefb가 DRAINING 상태로 전환 중이었으나, listContainerInstances API가 status: 'ACTIVE' 필터로 조회했음에도 해당 인스턴스를 반환했다. 이는 ECS API의 상태 전환 지연(race condition) 때문이다. 이후 startTask 호출 시 ECS가 DRAINING 사유로 task 배치를 거부했다. 현재 코드는 startTask 실패 시 return으로 즉시 종료하여 다른 정상 인스턴스를 시도하지 않는다. SQS 메시지 재처리(약 10초 간격)를 통해 5번째 시도에서 다른 인스턴스(9c6a809a...)로 성공했지만, 총 약 55초의 불필요한 지연이 발생했다. 이 패턴은 최근 7일간 8개 job에서 19회 반복되고 있다.

Scoring#

Confidence 80% · Actionability 44%

Confidence#

Actionability#