Hugging Face Hub이 Storage Regions 기능으로 모델과 데이터셋을 지리적 위치별로 저장하게 함으로써 EU 지역의 업로드/다운로드 속도를 4~5배 향상

Context

Enterprise 고객들이 GDPR 준수 및 규정 준수 요구사항을 충족하면서도 모델 및 데이터셋에 접근해야 하는 상황이었다. 또한 지리적으로 먼 곳에서 대용량 모델과 데이터셋을 업로드/다운로드할 때 높은 레이턴시 문제가 존재했다.

Technical Solution

• 저장소 지역 선택 기능 도입: Organization 설정에서 모델과 데이터셋을 저장할 지역(US, EU, 아시아-태평양) 선택 가능하게 구현
• 저장소 위치 감사 기능 추가: Organization이 기존 저장소들의 현재 위치를 확인할 수 있는 감사 페이지 제공
• Repository 태그 시스템 구축: 기본 위치가 아닌 곳에 저장된 모든 저장소에 지역 태그 표시
• Enterprise Hub 구독 시 활성화: 기능은 Enterprise Hub 플랜 구독 조직에서만 이용 가능하도록 제한

Impact

• EU 지역에서의 업로드/다운로드 속도: US 지역 저장소 대비 약 4~5배 향상

Key Takeaway

글로벌 서비스를 제공하는 엔터프라이즈 플랫폼에서는 데이터 주권(Data Sovereignty)과 규제 준수를 주요 비즈니스 요구사항으로 인식하고, 지리적 데이터 분산을 아키텍처 설계에 포함시키는 것이 고객 확보의 핵심 요소이다.