Gemini + Claude 병렬 리뷰 파이프라인으로 블로그 품질 자동 검증하기

Context

글 작성 후 직접 퇴고하는 과정에서 라인 단위 검수에 오랜 시간이 소요되었다. 단일 인간의 관점으로는 놓치기 쉬운 구조적 결함이 존재했다.

Technical Solution

• AI 기반 다중 Critic 구성: Gemini 2개, Claude 2개, 현재 세션 1개를 Bash &으로 동시 실행
• 다양한 페르소나 적용: "처음 보는 시니어 개발자", "이 기술 써본 사람", "편집자", "따라해볼 독자", "SEO 담당자" 역할 분담
• JSON 기반 점수 수집 및 임계값 적용: 평균 점수 8점 이상 통과, 미달 시 피드백 반영 후 재평가
• Synthesis 중재자 역할 도입: Critic 간 피드백 충돌 시 판단 담당
• Veto 거부권 메커니즘 적용: 과락 조건 설정으로 평균값만으로 통과되는 문제 해결
• Fallback 파서 구현: 파싱 실패 시 전체 중단을 방지
• Human-In-The-Loop 워크플로우: AI 합의 후에도 인간의 PR 리뷰를 반드시 거치고, PR body에 Critic 점수 테이블 포함, 수정 사항은 추가 커밋으로 반영

Impact

첫 라운드 평균 점수 7.6에서 코드 블록 3개 추가 및 나열식 트러블슈팅을 서사형으로 변경 후 두 번째 라운드에서 8.4로 상향.

Key Takeaway

AI 기반 콘텐츠 검증 파이프라인에서 다양한 페르소나를 통한 병렬 리뷰와 명확한 합의 메커니즘(Synthesis, Veto), 그리고 최종 인간 검수를 결합하면 자동화된 품질 관리와 휴먼 저지먼트의 균형을 유지할 수 있다.