Gemini 및 Ollama 기반 AI Avatar 애니메이션 제어 시스템 구축

Context

VRoid 3D 아바타의 애니메이션 트리거를 수동 입력 방식에서 AI 채팅 기반의 자동화 구조로 전환하고자 함. 기존의 정적 리스트 기반 응원 메시지 시스템과 제한적인 애니메이션 편집 툴로 인한 사용자 경험 저하를 해결해야 하는 상황.

Technical Solution

• 비용 효율성 및 접근성 확보를 위해 Free plan 제공 Gemini 3.1 Flash-Lite API를 기본 LLM으로 채택
• 온프레미스 환경 지원을 위해 Ollama 기반 Local LLM 통합 및 모델 크기에 따른 추론 성능 검증
• Thinking model(Qwen 3.5)의 과도한 추론으로 인한 Timeout 발생 확인 후, 비추론 모델인 Qwen 2.5:3b로 교체하여 응답 지연 시간 단축
• Local LLM의 Cold start 문제를 해결하기 위해 초기 로딩 시간을 최적화하는 Warm-up 기능 구현
• 단일 뷰 중심의 편집 환경을 3-Side Display 및 Full Tab 구조로 개편하여 UI/UX 병목 지점 제거
• JSON 기반의 폐쇄적 저장 방식에서 VRMA 표준 포맷 수출 기능을 추가하여 외부 앱과의 상호운용성 확보