기술 트렌드
30년 넘게 파이썬의 병렬 처리를 제약해 온 GIL(전역 인터프리터 락)이 선택 사항으로 바뀌고 있습니다. 파이썬 3.13의 실험적 도입과 3.14의 공식 지원으로 이어진 프리스레딩 빌드의 현황과 개발자가 지금 알아야 할 점을 정리합니다.
【파이썬의 오랜 숙제, GIL】 파이썬을 조금 깊이 공부해 본 사람이라면 GIL(Global Interpreter Lock)이라는 이름을 한 번쯤 들어봤을 것입니다. GIL은 표준 구현체인 CPython에서 한 번에 하나의 스레드만 파이썬 바이트코드를 실행하도록 막는 잠금 장치입니다. 메모리 관리를 단순하고 안전하게 만들어 주는 장점이 있었지만, 그 대가로 멀티코어 CPU가 보편화된 지금도 순수 파이썬 코드는 여러 스레드를 띄워도 CPU 연산을 동시에 처리하지 못한다는 한계를 안고 있었습니다.
【그동안의 우회 방법】 개발자들은 이 제약을 피하기 위해 여러 방법을 써 왔습니다. 대표적인 것이 multiprocessing 모듈로 프로세스를 여러 개 띄우는 방식인데, 프로세스마다 메모리를 따로 쓰기 때문에 자원 소모가 크고 프로세스 간 데이터 전달에 직렬화 비용이 듭니다. 또 다른 방법은 NumPy처럼 C나 C++로 작성된 확장 모듈이 무거운 연산 구간에서 GIL을 잠시 풀어 주는 것입니다. 데이터 과학과 AI 분야에서 파이썬이 성능 한계에도 널리 쓰일 수 있었던 것은 이런 우회 구조 덕분이었지만, 근본적인 해결책은 아니었습니다.
【PEP 703, 변화의 출발점】 전환점은 2023년 파이썬 운영위원회가 PEP 703을 승인하면서 찾아왔습니다. PEP 703은 GIL을 비활성화할 수 있는 CPython 빌드, 이른바 프리스레딩(free-threading) 빌드를 도입하자는 제안입니다. 운영위원회는 기존 생태계가 깨지지 않도록 단계적으로 진행하겠다는 방침을 밝혔습니다. 먼저 실험적 기능으로 내놓고, 충분히 안정되면 공식 지원 단계로 올리며, 최종적으로는 기본값으로 삼는 것을 검토한다는 3단계 로드맵입니다.
【3.13의 실험, 3.14의 공식 지원】 2024년 10월 공개된 파이썬 3.13에서 프리스레딩 빌드가 실험적 기능으로 처음 제공되었습니다. 일반 빌드와 별도로 설치되며, 실행 파일 이름 뒤에 t가 붙는 형태(python3.13t 등)로 구분됩니다. 이어 2025년 10월 출시된 파이썬 3.14에서는 PEP 779에 따라 프리스레딩 빌드가 실험 딱지를 떼고 공식 지원 대상이 되었습니다. 다만 여전히 기본 빌드는 GIL이 있는 버전이고, 프리스레딩은 사용자가 명시적으로 선택해야 하는 옵션이라는 점을 정확히 이해해 둘 필요가 있습니다. GIL 없는 빌드를 기본값으로 바꾸는 3단계는 생태계의 준비 상황을 보고 결정하기로 되어 있으며, 확정된 일정은 공식적으로 정해져 있지 않습니다.
【성능은 실제로 어떻게 달라지나】 프리스레딩 빌드의 가장 큰 효과는 CPU 연산 위주의 작업을 여러 스레드로 나눴을 때 코어 수에 가깝게 처리량이 늘어날 수 있다는 점입니다. 반면 GIL을 없애기 위해 참조 카운팅 방식을 바꾸고 내부 자료구조에 세밀한 잠금을 넣었기 때문에, 스레드를 하나만 쓰는 일반 코드는 오히려 조금 느려지는 비용이 있습니다. 3.13에서는 이 단일 스레드 성능 저하가 상당했지만, 3.14에서는 개선 작업을 통해 공식 문서 기준으로 대략 5~10% 수준까지 줄어든 것으로 안내되고 있습니다. 즉 모든 프로그램이 자동으로 빨라지는 것이 아니라, 병렬화할 수 있는 구조의 코드에서 이점이 나타난다고 보는 것이 정확합니다.
【확장 모듈 생태계가 관건】 프리스레딩이 실무에 자리 잡으려면 C 확장 모듈의 대응이 필수입니다. 프리스레딩 빌드에서 아직 대응하지 않은 확장 모듈을 불러오면 안전을 위해 GIL이 다시 활성화되는 동작이 기본으로 설정되어 있습니다. 확장 모듈 개발자는 내부 코드가 스레드 안전한지 점검한 뒤 GIL 없이 동작해도 된다고 선언해야 하고, 배포 시에도 cp313t, cp314t처럼 별도의 ABI 태그가 붙은 휠을 제공해야 합니다. NumPy를 비롯한 주요 과학 계산 라이브러리와 Cython 등 빌드 도구들이 순차적으로 지원을 추가해 왔지만, 사용하는 라이브러리 전체가 대응했는지는 프로젝트마다 직접 확인해야 합니다.
【함께 알아둘 동시성 기능들】 파이썬의 병렬 처리 개선은 프리스레딩 하나로 끝나지 않습니다. 3.14에서는 PEP 734에 따라 하나의 프로세스 안에서 여러 인터프리터를 독립적으로 실행하는 서브인터프리터 기능이 concurrent.interpreters 모듈로 표준 라이브러리에 들어왔습니다. 스레드처럼 가볍게 띄우면서도 인터프리터끼리 상태를 공유하지 않아 데이터 경쟁 위험을 줄이는 방식입니다. 또한 3.13부터 실험적으로 포함된 JIT 컴파일러도 개발이 이어지고 있습니다. 앞으로 파이썬 개발자는 문제의 성격에 따라 asyncio, 멀티프로세싱, 프리스레딩, 서브인터프리터 가운데 적절한 도구를 고르는 판단력이 더 중요해질 것입니다.
【개발자에게 생기는 새로운 책임】 GIL은 의도치 않게 일부 동시성 버그를 가려 주는 역할도 했습니다. GIL이 사라지면 여러 스레드가 같은 객체를 동시에 수정할 때 생기는 경쟁 조건이 실제로 드러날 가능성이 커집니다. 파이썬 내장 자료형 자체는 내부적으로 보호되지만, 여러 단계를 거치는 연산 전체가 원자적으로 실행된다는 보장은 없습니다. 따라서 threading 모듈의 Lock 같은 동기화 도구를 올바르게 쓰는 법, 공유 상태를 최소화하는 설계, 스레드 안전성을 고려한 테스트 같은 기본기가 이전보다 훨씬 중요해집니다. 그동안 Java나 C++ 개발자의 영역처럼 여겨지던 동시성 프로그래밍 지식이 파이썬 개발자에게도 요구되기 시작한 셈입니다.
【AI·데이터 분야에 미칠 영향】 파이썬이 AI와 데이터 엔지니어링의 사실상 표준 언어라는 점에서 이 변화의 파급력은 작지 않습니다. 모델 학습 전후의 데이터 전처리, 대량의 요청을 처리하는 추론 서버, 여러 작업을 동시에 조율하는 파이프라인처럼 그동안 멀티프로세싱의 메모리 부담을 감수하던 영역에서 스레드 기반 병렬 처리가 현실적인 선택지가 될 수 있습니다. 주요 딥러닝 프레임워크와 데이터 처리 라이브러리들도 프리스레딩 대응을 진행하고 있어, 생태계가 성숙할수록 활용 사례는 늘어날 것으로 보입니다.
【지금 준비할 수 있는 것】 취업이나 전직을 준비하는 입장에서 당장 모든 프로젝트를 프리스레딩 빌드로 바꿀 필요는 없습니다. 대신 GIL이 무엇이고 왜 존재했는지, 스레드와 프로세스와 비동기 처리가 각각 어떤 문제에 적합한지를 개념적으로 설명할 수 있어야 합니다. 여유가 있다면 공식 설치 프로그램이나 uv 같은 도구로 프리스레딩 빌드를 설치해 CPU 연산 작업을 스레드로 나눠 실행해 보고, 일반 빌드와 성능을 비교해 보는 것도 좋은 학습이 됩니다. 기술 면접에서도 파이썬의 동시성 모델에 대한 질문은 꾸준히 나오는 주제인 만큼, 이 변화의 배경과 현재 위치를 정확히 이해해 두면 탄탄한 기본기를 보여 줄 수 있을 것입니다.