PANews 7월 22일 소식, Coinbase가 공식적으로 7월 14일 서비스 중단 사건에 대한 사후 분석 보고서를 발표하며 사고 원인, 복구 과정 및 후속 개선 조치를 상세히 공개했다. Coinbase는 이번 장애가 일상적인 구성 업데이트 과정에서 발생한 Kubernetes 리소스 이름 충돌로 인해 주요 네트워크 구성 요소가 작동 불능 상태가 되면서 전송, 카드 거래 및 온체인 서비스에 영향을 미쳤지만, 사용자 자금은 전혀 위험에 처하지 않았다고 밝혔다. 7월 14일 미 동부 시간 12시 34분, Coinbase는 핵심 인프라 서비스를 호스팅하는 공유 프로덕션 Kubernetes 클러스터에 정기적인 구성 변경을 배포했다. 이 업데이트는 시스템 성능과 안정성을 개선하기 위한 새로운 서비스 배포 모델로의 마이그레이션의 일환이었으며, 표준 절차 검토를 거쳐 저위험 변경으로 간주되었다.

그러나 사전 프로덕션 점검에서 리소스 이름 충돌을 발견하지 못하면서, 해당 구성이 실수로 클러스터의 Istio Ingress Gateway 관련 Kubernetes 리소스를 수정하여 인그레스 게이트웨이를 사용할 수 없게 만들었다. 12시 37분까지 이 클러스터로 유입되는 모든 트래픽이 중단되어 내부 서비스가 여러 인프라 구성 요소에 접근할 수 없게 되었다.

Coinbase에 따르면, 영향을 받은 비동기 워크플로는 거래 정산, 자산 전송, 카드 거래 승인 등 자금 흐름 체계 거의 전체를 포괄했다. 인프라 서비스에 접근할 수 없게 되자 이러한 프로세스가 플랫폼 전체에서 일시 중지되었으며, 영향을 받은 사업은 다음과 같다. 리테일 사용자가 오프체인 거래, 입금 및 출금을 완료할 수 없었고, 처리 중이던 일부 거래는 중단된 상태로 표시되었다가 서비스 복구 후 자동으로 완료됨. Coinbase Card 직불 카드 거래가 일시적으로 실패했으며, 신용 결제는 여전히 사용 가능했지만 일부 카드 관리 기능이 작동하지 않음. Base 및 Solana에서의 Coinbase DEX 온체인 스왑 서비스가 중단됨. Coinbase Exchange 및 Prime 기관 고객의 전송 및 정산이 실패하거나 지연됨. Coinbase Developer Platform 고객이 계좌 개설, 자금 이체 및 입금 서비스를 완료할 수 없음.

Coinbase는 회사 측이 복구 기간 동안 영향을 받은 프로세스를 일시 중지하고 Retail, Exchange 및 Prime 상태 페이지를 통해 진행 상황을 지속적으로 업데이트했다고 밝혔다. 미 동부 시간 13시 20분에 인그레스 게이트웨이가 복구되었고, 13시 23분에 사건이 대부분 완화되었다. 이후 시스템이 적체된 작업을 처리하기 시작했으며 대부분의 서비스가 신속하게 복구되었고, 나머지 대기열은 몇 시간 내에 정리 완료되었다. 이번 사건과 관련하여 Coinbase는 시스템 안정성 향상을 위해 다음과 같은 조치를 취할 것이라고 밝혔다. 구성 업데이트가 실수로 다른 구성 요소에 영향을 미치는 것을 방지하기 위해 배포 단계 보호 메커니즘을 확장하여 Kubernetes 리소스 이름 충돌을 자동으로 감지 및 차단. 장애 발생 시 복구 도구까지 동시에 영향을 받지 않도록 배포 도구와 기반 인프라 간의 중복성 강화. 주요 장애 상황에서 복구 속도를 높이기 위해 비상 접근 메커니즘을 정기적으로 검토 및 훈련.

Coinbase는 회사의 목표는 항상 무중단 운영을 실현하는 것이며, 향후 유사한 장애가 발생하더라도 더 빠르게 롤백하고 복구할 수 있도록 인프라를 지속적으로 재구성할 것이라고 밝혔다. 또한 회사는 영향을 받은 사용자에게 사과의 뜻을 전하며, 여전히 관련 문제를 겪고 있는 사용자는 공식 지원 팀에 문의할 것을 권장했다.