파이프라인 유지보수 95%의 늪, Keptn 이벤트 기반 오케스트레이션으로 탈출

Context

전통적인 파이프라인은 도구 간 의존성이 강한 모놀리식 구조. 환경 가용성 부족과 수동 복구 작업으로 인한 운영 효율 저하 발생. 웹·API·모바일별로 파편화된 설정으로 유지보수 복잡도 증가.

Technical Solution

• Keptn을 통한 선언적 GitOps 기반 Control Plane 도입으로 분산된 모니터링·배포·복구 프로세스 통합
• Event-driven 아키텍처를 적용하여 도구 간 직접 연결 대신 Keptn 이벤트 구독 방식으로 결합도 해소
• Job Executor Service(JES)가 YAML 설정을 기반으로 컨테이너를 실행하고 상태 이벤트를 주고받는 추적 가능 구조
• SLI/SLO 기반의 Quality Gates를 구축하여 정량적 지표 충족 시에만 다음 단계로 배포를 승인하는 자동화 로직
• Blue/Green 및 Canary 전략을 내장하여 환경별 리스크를 최소화하는 Progressive Delivery 설계
• 기존의 Jenkins, Argo, Prometheus 등 기존 스택을 유지하며 오케스트레이션 계층만 분리하는 추상화 전략

Impact

• 파이프라인 유지보수 시간 95% 점유
• 수동 작업 비중 80% 발생
• 수동 복구 작업 비중 90% 도달
• Quality Gates 통과 기준: Probe 성공률 95% 초과 및 응답 시간 200ms 미만

Key Takeaway

배포 파이프라인의 복잡도는 도구의 추가가 아닌 책임 분리 여부에서 결정됨. 이벤트 기반의 오케스트레이션 계층을 통해 개별 도구의 교체 가능성을 확보하고 배포 판단을 정량적 지표(SLO)에 위임하는 설계가 확장성의 핵심.