1,000+ 커스텀 영상 데이터셋 기반 ISL AI 제스처 번역 시스템 구축

Context

기존 Indian Sign Language(ISL) 데이터셋의 부재와 파편화로 인해 신뢰도 높은 모델 학습이 불가능한 제약 상황 발생. 오픈소스 저장소 기반의 접근 방식으로는 실사용 가능한 수준의 정확도 확보에 한계가 있음.

Technical Solution

• 데이터 부족 문제 해결을 위해 직접 ISL을 습득하여 1,000개 이상의 고품질 영상을 수집 및 큐레이션한 Brute-force 데이터셋 구축
• 실제 사용 환경의 다양성을 고려하여 Egocentric View와 Exocentric View라는 두 가지 관점의 아키텍처 설계
• 스마트 글래스 POV를 적용한 Egocentric View 설계를 통해 물리적 환경 내 실시간 번역 기능 구현
• 노트북 웹캠 최적화를 통한 Exocentric View 설계를 통해 가상 회의 및 디지털 워크스페이스 내 접근성 확보
• 현장 방문 및 사용자 피드백 기반의 Product Validation 과정을 거쳐 실제 사용자의 페인포인트를 설계에 반영