2028년 AI Agent Phone 출시 전, USB HID 기반의 Hardware-assisted 제어 설계

Context

기존 Software-only AI Agent는 OS API 의존성으로 인해 앱 개발자가 노출한 기능 범위 내에서만 동작하는 제약 존재. 권한 요청과 설치 과정이 필수적이며 플랫폼별 API 파편화로 인한 낮은 범용성이 병목 지점으로 작용.

Technical Solution

• USB HID 프로토콜을 활용해 호스트 기기에 키보드 및 마우스로 인식시키는 하드웨어 추상화 계층 설계
• HDMI를 통한 화면 캡처와 On-device Go-based LLM Agent Runtime 기반의 실시간 스크린 분석 및 제어 루프 구현
• App Intents나 Accessibility API 등 OS 레벨의 권한 요청 없이 모든 앱과 OS에서 동작하는 Zero-install 구조 채택
• Full-duplex 오디오 처리를 통한 실시간 상호작용 및 USB HID를 통한 입력값 피드백으로 Autonomous Agent 기능 구현
• OpenAI의 AI Agent Phone이 지향하는 Agent-first OS 레이어를 하드웨어 브릿지로 선제 구현하여 기존 기기 호환성 확보