Elasticsearch connection pool exhaustion — concurrent bulk indexing

What Happened#

2026-05-22 06:57~07:00 UTC에 cupixworks-worker(us-west-2)에서 Elasticsearch connection pool이 완전 고갈되어 Feed#_index_document와 EditingSplitWorker#perform에서 연쇄적으로 실패가 발생했다. 동일 호스트에서 총 8건의 connection pool timeout 에러가 기록되었으며, 그 중 일부는 Sidekiq 재시도 소진 후 death handler에 도달했다.

Quick Facts#

Timeline#

1. 06:54~06:57 UTC — 대량 indexing 작업 진행 (CreateSitetrackEditingEntitiesWorker, BulkPartialIndexWorker, bulk_partial_save_to_file)
2. 06:57:46 UTC — EditingSplitWorker에서 최초 connection pool timeout 발생 (editing_id: 1115084, 1115090)
3. 06:58:16~06:58:54 UTC — EditingSplitWorker 반복 실패, Sidekiq death handler 발동
4. 06:59:32~06:59:58 UTC — Feed#_index_document에서도 동일 에러 발생 (이 클러스터의 대표 에러)

Scoring#

Confidence 85% · Actionability 28%

Confidence#

Actionability#