피드로 돌아가기
Dev.toAI/ML
원문 읽기
250라인의 구조적 시스템으로 도메인 전문가 12인을 제친 예측 봇 설계
I built a football bot that doesn't watch football. It's #2 in our World Cup league.
AI 요약
Context
도메인 지식에 기반한 인간의 직관적 예측이 주를 이루는 환경에서 정교한 데이터 분석 없이 단순 룰셋만으로 경쟁하는 상황. 파편화된 직관 대신 일관된 시스템을 통한 예측 성능 확보가 핵심 과제.
Technical Solution
- Cron Job 기반의 15분 주기 자동화 스케줄링을 통한 최신 데이터 반영 구조 설계
- Idempotent State Guard 도입으로 중복 예측을 방지하고 상태 일관성을 유지하는 제어 로직 구현
- Squad-value ratio, Class gap, Pace mismatch라는 3가지 핵심 구조적 프록시를 정의하여 LLM의 판단 기준을 정형화
- Claude LLM을 단순 Worker로 활용하고, 결정 근거를 JSON 레코드로 남기는 구조적 로깅 체계 구축
- 킥오프 전 90~200분 윈도우 내에서만 작동하는 시간 기반 트리거 설계를 통한 효율적 리소스 운용
실천 포인트
1. LLM 도입 시 모델의 추론 능력에 의존하기보다 명확한 제약 조건이 포함된 Structured Prompt 설계 여부 검토
2. 상태 변화가 잦은 시스템에서 중복 처리를 방지하는 Idempotency 계층 적용
3. 추론 결과에 대한 명확한 근거(Reasoning)를 정형 데이터(JSON)로 기록하여 사후 분석 가능성 확보
4. 복잡한 모델링 대신 문제 해결을 위한 핵심 지표(Proxy)를 단순화하여 정의하는 접근 방식 고려