Claude가 만든 C 컴파일러(CCC) vs GCC 성능 벤치마크: AI 코딩의 현주소
Anthropic의 Claude Opus 4.6이 작성한 C 컴파일러(CCC)와 GCC의 성능을 비교 분석합니다. 리눅스 커널 컴파일 성공 여부와 SQLite 벤치마크 결과를 통해 AI가 만든 컴파일러의 가능성과 한계를 파헤칩니다.
최근 Anthropic은 Claude Opus 4.6이 100% 작성한 C 컴파일러, 일명 **CCC (Claude's C Compiler)**를 공개했습니다. 이 컴파일러가 리눅스 커널을 컴파일할 수 있다는 주장은 개발자 커뮤니티에 큰 파장을 일으켰습니다.
과연 AI가 만든 컴파일러는 수십 년간 최적화된 산업 표준인 GCC와 비교했을 때 어느 정도의 성능을 보여줄까요? Harshanu의 심층 분석을 바탕으로 그 결과를 정리해 보았습니다.
1. CCC란 무엇인가?
CCC는 Rust로 작성된 C 컴파일러로, x86-64, AArch64, RISC-V 등 다양한 아키텍처를 지원합니다. 놀라운 점은 프론트엔드부터 코드 생성기, 링커까지 모든 구성 요소가 Claude Opus 4.6에 의해 작성되었다는 것입니다. 인간은 오직 테스트 케이스 작성과 가이드 역할만 수행했습니다.
2. 벤치마크 환경 및 대상
공정한 비교를 위해 다음과 같은 환경에서 테스트가 진행되었습니다.
- 대상: SQLite 3.46 (단일 소스 파일), Linux Kernel 6.9
- 비교군: GCC 14.2 vs CCC
- 환경: Debian VM (6 vCPU, 16GB RAM)
리눅스 커널은 복잡성의 끝판왕이고, SQLite는 표준 C 준수 여부와 런타임 성능을 확인하기에 가장 적합한 대상입니다.
3. 충격적인 결과: 158,000배의 차이
결론부터 말하자면, CCC는 "작동은 하지만, 실사용은 불가능한" 수준입니다.
✅ 성공한 점 (Correctness)
- 정확성: SQLite의 모든 쿼리 테스트를 통과했습니다. 결과값은 GCC와 동일했습니다.
- 컴파일 성공: 리눅스 커널의 2,844개 C 파일을 에러 없이 컴파일했습니다.
❌ 실패한 점 (Performance & Linking)
- 런타임 속도: SQLite 벤치마크에서 GCC(
-O0) 대비 737배, 최적화된 GCC(-O2) 대비 1,242배 느렸습니다. - 최악의 케이스: 서브쿼리가 포함된 복잡한 SQL 연산에서는 무려 158,000배 느린 성능을 보였습니다. (GCC: 0.047초 vs CCC: 7,432초)
- 커널 링킹 실패: C 파일 컴파일은 성공했으나, 링킹 단계에서
__jump_table등의 재배치(relocation) 정보를 잘못 생성하여 최종 바이너리 생성에는 실패했습니다.
4. 왜 이렇게 느린가? (Root Cause)
CCC의 성능 저하 원인은 컴파일러 최적화의 부재에 있습니다.
1. 레지스터 할당 (Register Allocation) 실패
현대 CPU 성능의 핵심은 레지스터의 효율적인 사용입니다. 하지만 CCC는 레지스터 할당 알고리즘이 거의 부재하여, 모든 변수를 스택(RAM)에 저장하고 rax 레지스터 하나만을 셔틀처럼 사용하여 데이터를 나릅니다.
- GCC: 레지스터 간 연산 (
cmpl %eax, %edx) - CCC: 메모리 읽기 -> 레지스터 -> 메모리 쓰기 반복 (수천 배 느림)
2. 무늬만 최적화 옵션
CCC는 -O2, -O3 플래그를 받아들이긴 하지만, 실제로는 아무런 기능도 하지 않습니다. -O0와 바이트 단위까지 똑같은 바이너리를 생성합니다. GCC가 수행하는 루프 풀기(Loop Unrolling), 인라인 함수(Inlining), 벡터화(Vectorization) 등의 최적화가 전혀 없습니다.
5. 결론: AI 코딩의 현주소
Claude's C Compiler는 **"AI가 복잡한 시스템 소프트웨어를 처음부터 끝까지 만들 수 있다"**는 개념 증명(PoC)으로서는 대성공입니다. 리눅스 커널 소스를 파싱하고 목적 코드로 변환하는 것은 인간 개발자에게도 매우 어려운 과제입니다.
하지만 **"효율적이고 최적화된 결과물"**을 내놓기에는 아직 한계가 명확합니다. 컴파일러 최적화는 수십 년간 쌓인 연구와 노하우의 결정체이며, 단순히 문법을 아는 것과는 다른 차원의 문제입니다.
한줄 요약: Claude는 훌륭한 C 파서(Parser)를 만들었지만, 끔찍한 코드 생성기(Code Generator)를 만들었다.
Reference: CCC vs GCC by Harshanu
댓글