CI를 넘어 Public Network 관점의 Runtime Validation으로 UCP 가용성 확보

Context

CI 기반 검증은 코드 변경 시점에만 작동하여 TLS 인증서 갱신 실패, CDN 캐시 오류, 플랫폼 헤더 변경 등 런타임 환경의 외부 요인으로 인한 UCP Profile 장애를 탐지하지 못함. 정적 검증만으로는 실제 AI 에이전트가 접근하는 Public Surface의 가용성을 보장할 수 없는 구조적 한계 존재.

Technical Solution

• Public Internet을 통한 외부 네트워크 기반 Fetch 방식으로 내부 캐시 및 라우팅 간섭을 배제한 실시간 검증 구현
• Pass/Fail의 이분법적 판단을 넘어 기정의된 Baseline Score와 비교하여 점진적 품질 저하(Regression)를 탐지하는 비교 로직 설계
• cron 기반의 정기적 스케줄링을 통한 Runtime Watchdog 체계 구축으로 배포 없는 장애 상황에 대응
• Transient Network Blip으로 인한 오탐 방지를 위해 연속 실패 시 알람을 발송하는 Debounce 전략 적용
• .ucp-baseline 파일을 통한 상태 관리로 품질 개선 시 기준점을 상향 조정하는 Ratchet 메커니즘 도입