CPython GIL 구조 분석을 통한 Compute-bound vs I/O-bound 전략 수립

Context

CPython의 Global Interpreter Lock(GIL)으로 인해 멀티 코어 환경에서도 단일 스레드만 바이트코드를 실행하는 제약 발생. 순수 Python 로직 기반의 CPU 집약적 작업 시 Thread 도입에도 성능 향상이 없는 병목 지점 확인.

Technical Solution

• Reference Counting 기반 메모리 관리 시 발생하는 Race Condition 방지를 위한 전역 락(GIL) 채택
• Fine-grained Locking 도입 시 발생하는 오버헤드 및 단일 스레드 성능 저하를 방지하기 위한 설계적 Trade-off
• C Extension 생태계와의 호환성 유지를 위해 CPython 인터프리터 수준의 잠금 메커니즘 유지
• Blocking I/O 발생 시 C 코드 레벨에서 GIL을 명시적으로 Release 하여 타 스레드 실행 권한을 부여하는 Context Switching 구조
• sys.setswitchinterval()을 통한 5ms 기본 인터벌 기반의 시분할 처리 방식 적용

Key Takeaway

작업의 성격(Pure Python, I/O, C Extension)에 따라 Threading, Multiprocessing, asyncio 중 최적의 동시성 모델을 선택하는 결정 트리 설계가 필수적임.