피드로 돌아가기
GeekNewsAI/ML
원문 읽기
FUTO Swipe: 공개형 스와이프 입력 모델
250만 파라미터 소형 모델로 구현한 온디바이스 스와이프 입력 시스템
AI 요약
Context
기존 고품질 스와이프 입력 기술은 비공개 라이브러리나 프라이버시 침해적인 키보드 앱에 종속된 폐쇄적 구조임. 범용적으로 사용 가능한 오픈소스 모델과 저사양 기기에서도 동작하는 저지연 추론 엔진의 부재가 핵심 병목 지점이었음.
Technical Solution
- 범용 Encoder, 언어별 ContextLM, 레이아웃별 Decoder로 역할을 분리한 계층적 모델 구조 설계
- Encoder를 통해 레이아웃 독립적인 범용 예측을 수행하고, Decoder로 특정 언어와 QWERTY 레이아웃의 특성을 정밀하게 학습
- ContextLM을 통한 선행 단어 기반의 후보 필터링으로 예측 정확도를 보정하는 후처리 파이프라인 구축
- 사전 제약 Beam Search를 지원하는 C++ 기반 swipe-library를 통해 온디바이스 환경의 밀리초 단위 추론 속도 확보
- 80만 개의 배열 테스트를 통해 제스처 신호가 명확한 최적 레이아웃 ClearFlow를 설계하여 입력 모호성 제거
실천 포인트
- 온디바이스 추론 성능 극대화를 위해 모델 파라미터 규모를 수백만 단위로 제한하고 C++ 기반의 전용 라이브러리를 검토할 것 - 단순 모델 예측 결과에 의존하지 말고, 도메인 지식이 반영된 사전 제약(Constrained) Beam Search와 같은 알고리즘적 보정 계층을 추가할 것 - 입력 데이터의 모호성이 높은 경우, 소프트웨어적 해결책 외에 입력 레이아웃 자체를 최적화하는 물리적 설계 변경을 고려할 것