Plain English 기반 AI Agent를 통한 E2E 테스트 자동화 및 유지보수 제로화

Context

Playwright, Cypress 등 기존 E2E 프레임워크의 과도한 테스트 스크립트 작성 비용과 Selector 변경에 따른 높은 유지보수 공수 발생. 인프라 관리 부담과 Flaky Test 해결을 위한 엔지니어링 리소스 낭비가 심화된 상황.

Technical Solution

• Natural Language Processing 기반의 Plain English 테스트 시나리오 해석 및 실행 구조 채택
• Browser Primitives를 활용한 AI Agent의 실시간 UI 내비게이션 및 상호작용 로직 구현
• OAuth 및 OTP 처리를 위한 전용 Per-agent Inbox 시스템 구축을 통한 인증 병목 해결
• AES-256-GCM 암호화를 적용한 Credentials 저장소 설계를 통한 보안 제약 사항 충족
• GitHub App 및 Webhook 연동을 통한 CI/CD 파이프라인 내 자동 트리거 및 리포팅 체계 구축
• Visual Understanding 모델 적용으로 단순 DOM 체크를 넘어선 Layout Shift 및 렌더링 이슈 감지

Impact

• 초기 E2E 테스트 실행까지의 온보딩 시간을 2분 미만으로 단축