피드로 돌아가기
Tracking LLM Pricing Monthly: An Open Dataset for 22 AI Models
Dev.toDev.to
AI/ML

OpenRouter API 기반 22종 LLM 가격 트래킹 자동화 파이프라인 구축

Tracking LLM Pricing Monthly: An Open Dataset for 22 AI Models

Sage2026년 4월 13일2beginner

Context

LLM Pricing의 빈번한 변동과 파편화된 정보 제공으로 인한 수동 데이터 수집의 비효율성 발생. 정형화된 데이터셋 부재로 인한 월별 비용 추세 분석 및 모델 간 효율성 비교의 어려움 존재.

Technical Solution

  • OpenRouter API를 Single Source of Truth로 채택하여 다수 Provider의 가격 정보를 표준화된 포맷으로 통합 수집
  • Cron Job 기반의 월 단위 자동 업데이트 스케줄링을 통한 데이터 최신성 유지
  • 현재 데이터와 Historical Snapshot을 분리 저장하는 아키텍처를 통해 시계열 추세 분석 기능 구현
  • Frontier, Efficiency, Reasoning, Open Source의 4개 Category 분류 체계를 통한 모델 특성별 정렬
  • 전체 시장가격을 반영하는 AI CPI와 모델 체급 간 비용 격차를 분석하는 Budget Index라는 Composite Index 설계
  • JSON 및 CSV 포맷의 다중 출력 구조를 통해 데이터 소비자의 접근성 및 호환성 확장

1. 외부 API의 데이터 포맷이 다양할 경우 OpenRouter와 같은 Aggregator를 활용하여 인터페이스 표준화 검토

2. 단순 데이터 수집을 넘어 도메인 특화 지표(CPI, Budget Index 등)를 설계하여 데이터의 분석 가치 제고

3. 정기적인 Snapshot 저장 구조를 설계하여 단순 상태 저장이 아닌 시계열 트렌드 분석 기반 마련

원문 읽기