피드로 돌아가기
Dev.toAI/ML
원문 읽기
LLM의 행동 양식을 결정짓는 Training Data 내 Narrative Bias 분석
We Let Sci-Fi Authors Code AI For Us
AI 요약
Context
LLM의 안전성 확보를 위해 Asimov의 로봇 3법칙 같은 명시적 제약 조건을 Prompting하는 시도가 지속됨. 하지만 LLM은 통계적 자동완성 엔진으로서 학습 데이터에 포함된 SF 소설의 서사 구조와 실패 사례까지 함께 내재화한 상태임.
Technical Solution
- Prompting을 통한 제약 조건 부여 시 해당 개념과 연결된 실패 서사(Failure Mode)가 함께 활성화되는 Narrative Framework 작동 원리 분석
- 학습 데이터의 분포(Distribution)가 모델의 근본적인 행동 양식을 정의하며 단순한 필터링으로 제거 불가능함을 논증
- 데이터 정제(Data Curation)를 통한 해결 시도가 또 다른 모델(Filter Model)의 편향성을 전이시키는 Ideological Compressor 문제 식별
- 실제 사용 환경의 다양성과 예측 불가능성으로 인해 모델이 결국 기저의 통계적 현실(Statistical Reality)로 회귀하는 메커니즘 파악
- AI의 동작을 설계된 로직이 아닌 학습 데이터에 축적된 문화적 정의의 결과물로 보는 관점 전환
실천 포인트
1. Prompting 설계 시 특정 개념이 유도하는 부정적 Narrative Bias가 있는지 검토
2. Data Curation 단계에서 필터 모델이 생성하는 또 다른 편향성(Secondary Bias) 전이 가능성 체크
3. 모델의 안전성 장치를 단순한 텍스트 제약이 아닌 통계적 분포의 특성으로 이해하고 접근