멀티 클러스터 환경의 Progressive Delivery 구현 전략

Context

여러 Kubernetes 클러스터에 애플리케이션을 개별적으로 배포하는 수동 방식의 한계. 클러스터 간 동기화 부재로 인한 배포 오류 가능성 증가. 일관된 릴리스 제어를 위한 통합 파이프라인 필요성 대두.

Technical Solution

• Canary, Baseline, Primary로 이어지는 Progressive Delivery 파이프라인 설계
• New Version과 Current Version을 동일 스케일로 구동하여 공정한 비교를 수행하는 Baseline 배포 전략
• pipecd.dev/variant 라벨링을 통한 리소스 격리 및 Service-Deployment 순차 삭제 기반의 안전한 Cleanup 로직
• Istio VirtualService 가중치 조정을 통한 트래픽 분할 및 editableRoutes 설정을 이용한 수정 범위 제한
• errgroup 기반의 병렬 처리 구조를 통해 N개 클러스터에 동시 배포하고 최초 에러 발생 시 즉시 실패하는 메커니즘 적용
• 배포 단계별 세부 라우팅 변경 사항을 기록하는 per-route 로깅 시스템 구축으로 디버깅 효율성 강화

Key Takeaway

분산 환경의 배포 안정성은 정교한 트래픽 제어와 더불어, 비교 대상의 조건을 동일하게 맞추는 Baseline 설계와 병렬 처리의 원자성 확보에 있음.