피드로 돌아가기
Dev.toAI/ML
원문 읽기
32B 이하 경량 모델 체이닝을 통한 저비용 고효율 AI 코믹 생성 파이프라인 구축
Building Perri: A Comic Strip Generator
AI 요약
Context
거대 모델 중심의 AI 서비스 구조로 인한 과도한 컴퓨팅 자원 소모와 높은 지연 시간 발생. 리소스 효율성을 극대화하면서도 창의적 결과물을 도출하는 경량화된 추론 아키텍처 필요성 대두.
Technical Solution
- Gradio 기반 Frontend와 Modal Labs 기반 Serverless Backend의 decoupled 구조 설계를 통한 관심사 분리
- Meta-Llama-3-8B-Instruct를 활용한 Raw Prompt의 구조적 Visual Script 및 Dialogue 변환 로직 구현
- SDXL-Turbo의 Single-step adversarial diffusion 특성을 이용한 실시간 이미지 합성 공정 최적화
- 별도 캡션 레이어 대신 JPEG 이미지 상에 대화문을 직접 렌더링하는 Dialogue Overlay Composition 방식 채택
- Modal Labs의 Scale-to-zero 기능을 통한 유휴 자원 비용 제거 및 빠른 Cold-start 시간 확보
- Base64 인코딩 기반의 이미지 전송 방식을 통한 Frontend-Backend 간 데이터 전달 효율 증대
실천 포인트
1. 무조건적인 LLM 사이즈 확대보다 태스크별 최적화된 파라미터 규모의 모델 조합 검토
2. GPU 비용 절감을 위해 Serverless GPU 인프라의 Scale-to-zero 옵션 적용 가능성 확인
3. 이미지/텍스트 합성 단계에서 외부 API 의존도를 낮추는 내부 렌더링 파이프라인 설계 고려