IntegrationRepository race condition — concurrent token refresh lock contention

What Happened#

2026-07-16 09:07:20 KST 에 cupixworks-migration-worker 에서 실행되던 Cupix::Cron::Integration.renew_before_expiration cron 이 특정 BIM360 integration 1건에 대해 refresh token 갱신을 시도하다 ARG10060 Refresh access token request is too many 에러로 실패했다. 이 에러는 Redis 기반 per-integration lock (Cache::Integration::{id}::Lock::Key) 획득 실패시 발생하며, 동시에 다른 refresh 요청이 진행 중이라는 신호다. cron 은 rescue 후 next 로 다음 integration 으로 진행했으므로 사용자 영향은 없다.

Quick Facts#

Affected Teams#

Timeline#

1. 2026-07-16 09:07:18 KST — cron Cupix::Cron::Integration.renew_before_expiration 시작, refresh_token_due_to_expire 로 만료 임박 candidate 다수를 순회하며 refresh_token 호출 시작
2. 2026-07-16 09:07:20 KST — 특정 integration 에서 check_refresh_request 의 setnx 가 false 반환 → ARG10060 예외 발생, [Cupix::Cron::Integration] failed to renew integration: Refresh access token request is too many 로그 기록
3. 2026-07-16 09:07:20~23 KST — cron 은 rescue 후 나머지 candidate (integrations 1012, 953, 3218, 3219, 5332, 5353, ...) 계속 처리
4. 2026-07-16 13:07 KST (예상) — 다음 cron 주기 (7 */4 * * *) 에 동일 integration 재시도 예정

Scoring#

Confidence 85% · Actionability 32%

Confidence#

Actionability#