Cron Job의 3대 Silent Failure 해결을 위한 Output Assertion 설계

Context

단순 실행 여부(Silence Detection)와 실행 시간(Duration Anomaly)만으로 모니터링하던 기존 방식의 한계 분석. 프로세스는 정상 종료(Exit 0)되었으나 실제 데이터 처리량이 0인 '논리적 실패' 상황을 감지하지 못하는 가시성 공백 확인.

Technical Solution

• 작업 수행 결과물을 정량적 수치로 변환하는 Counter 변수 도입
• 결과 수치를 외부 모니터링 서비스로 전송하는 Heartbeat Ping 메커니즘 구축
• 서비스 측에서 롤링 평균 대비 처리량 급감(예: 80% 하락)을 감지하는 Output Assertion 로직 적용
• Zero 처리량이 절대 불가능한 작업에 대해 Non-zero Exit Code를 강제하는 Guard Clause 배치
• 개별 작업의 커스텀 검증 로직을 외부 서비스의 일반화된 규칙으로 분리하여 관리 복잡도 감소