F1 Score 60.1% 달성, Multi-Agent 기반 AI PR 리뷰 최적화

Context

수동 PR 작성 및 리뷰 과정에서 발생하는 시간 소모와 일관성 부족 문제. 단일 LLM 모델 기반 리뷰 도구의 낮은 탐지 정확도와 높은 노이즈 발생 한계.

Technical Solution

• PR-Agent 엔진 기반의 자동 PR 설명 생성 및 코드 개선 제안 구조
• 2.0 버전부터 단일 패스 리뷰를 대체하는 Multi-Agent 아키텍처 도입
• 버그 탐지, 보안 분석, 코드 품질, 테스트 커버리지 등 도메인별 특화 에이전트의 병렬 처리 방식
• 각 에이전트별 최적화된 프롬프트와 평가 기준 적용을 통한 분석 정밀도 향상
• Apache 2.0 라이선스 기반의 Open Source 코어와 기업용 Managed 서비스의 이원화 전략
• GitHub Actions 연동을 통한 CI 파이프라인 내 자동 리뷰 실행 설계

Impact

• Multi-Agent 아키텍처 적용 결과 8개 도구 중 가장 높은 F1 Score 60.1% 기록
• Qodo Merge Pro 비용 사용자당 월 $19 적용
• 리뷰 완료 시간 2~4분 소요

Key Takeaway

범용 LLM 하나에 의존하기보다 특정 도메인에 최적화된 전문 에이전트들을 병렬로 배치하고 결과를 취합하는 구조가 코드 리뷰의 정확도를 높이는 핵심 설계 원칙임.