Gemma 4 31B, Apache 2.0 기반 인간 선호도 ELO 2150 달성함

Context

Google Gemma 4가 Apache 2.0 라이선스로 출시되었으며, ELO 벤치마크에서 GPT-OSS-120B를 상회하는 2150점을 기록함. 그러나 자동화된 벤치마크에서는 Qwen 3.5 27B와 거의 동등한 성능을 보임. 커뮤니티에서는 추론 속도와 VRAM 소비 문제가 지속적으로 보고되고 있음.

Technical Solution

• Apache 2.0 라이선스 적용으로 상업적 사용 제한 완전 해제함
• MoE 아키텍처 (26B-A4B)와 Dense 모델 (31B) 이중 라인업 제공함
• E2B (2.3B 효과적 파라미터) 모델로 엣지 디바이스 최적화함
• 256K 컨텍스트 윈도우 지원하여 긴 컨텍스트 작업 대응함
• HuggingFace Transformers/PEFT day-zero 호환성 이슈 별도 monkey-patch로 해결함

Impact

ELO 스코어 2150으로 GPT-5-mini 대비 유사 인간 선호도 달성함. MMMLU에서 88.4%로 Qwen 3.5 27B (85.9%) 대비 2.5% 우위 차지함. E2B 모델이 Gemma 3 27B를 벤치마크에서 능가함.

Key Takeaway

Gemma 4의 핵심 가치는 벤치마크 수치가 아닌 Apache 2.0 라이선스, 다국어 품질, 파인 튜닝 준비 상태의 조합임. 속도와 효율성이 중요한 영어 전용 배포에는 Qwen 3.5가 여전히 우위이지만, 법적 제약 없는 상업적 다국어 활용에는 Gemma 4가 강력한 대안임.