컴퓨터 비전 엔지니어가 이미지 증강을 체크리스트가 아닌 설계 프로세스로 재정의해 라벨 손상과 모델 붕괴 방지

Context

대부분의 이미지 증강 파이프라인이 실패하는 이유는 변환이 약하기 때문이 아니라 시스템으로 설계되지 않았기 때문이다. 엔지니어들은 flip → rotate → blur → color jitter를 무작정 쌓아올리며 라벨 손상, 파괴적 상호작용, 동시성 증가로 인한 모델 붕괴를 야기한다.

Technical Solution

• 모든 변환을 불변성 주장(invariance claim)으로 정의: 각 변환은 데이터 분포에 대한 명시적 모델이며 라벨을 반드시 보존해야 함
• 7단계 설계 프로세스 도입: 각 변환이 실제 실패 모드(failure mode)에 매핑되는지 검증하고 강도를 모델 용량·데이터 규모와 매칭
• 라벨 손상 디버깅: 의료 영상(흉부 X선)처럼 진단 신호가 미묘한 밀도 차이에 있는 경우 과도한 탄성 왜곡·극단적 밝기·강한 노이즈 제거
• 대상 강건성 테스트 도입: 집계 메트릭이 아닌 특정 조건에서의 성능 검증으로 변환의 실제 효과 측정
• 도메인별 맞춤형 구성: 객체 감지는 bbox_params 검증과 LetterBox 사용(stride 정렬), 의미론적 분할은 마스크 무결성 보존을 위한 최근접 이웃 보간과 512×512 크롭 사용

Key Takeaway

이미지 증강은 트릭의 모음이 아니라 데이터 분포에 대한 제어된 설계 프로세스이며, 각 변환의 불변성 주장이 실제 배포 환경의 실패 모드와 일치할 때만 일반화 성능 향상을 신뢰할 수 있다.