Closed-loop 제어 기반의 신뢰성 있는 AI Browser Automation 설계 전략

Context

단일 실행 위주의 데모 수준 자동화를 넘어 실제 운영 환경의 비결정적 브라우저 동작을 제어해야 하는 과제 직면. 임의의 JavaScript 실행(eval)과 고정 대기 시간(sleep) 사용으로 인한 불투명한 에러 발생 및 실행 불안정성 문제 분석.

Technical Solution

• Raw eval 방식의 대체로 예측 가능한 에러 핸들링을 위한 Structured Verbs 기반의 명령어 체계 설계
• 시간 기반의 sleep(2000)을 제거하고 특정 DOM 상태나 네비게이션 완료를 감지하는 Condition-based Polling 도입
• 모든 쓰기 작업 후 읽기 작업을 강제하여 상태 변화를 검증하는 Write-then-Read 확인 루프 구축
• 인증 벽 해결을 위해 별도의 스크래핑 대신 브라우저 세션 쿠키를 활용한 In-page Fetch 전략 채택
• Shadow Root 및 Canvas UI 등 DOM 분석 불가 영역 대응을 위해 Vision Model 기반의 Screenshot Fallback 구조 설계