GLM 5.2가 코딩 벤치마크 1티어에 합류했다 — Fable·Opus 4.8·GPT-5.5와 동점 달성의 의미
“중국 모델? 그거 그냥 싼 맛에 쓰는 거 아냐?”
불과 얼마 전까지 나도 그렇게 생각했다. (반성한다.) 그런데 이번 벤치마크 결과를 보고 머리를 한 대 세게 얻어맞은 기분이었다. ZAI(지푸AI)의 GLM 5.2가 단일 웹앱 풀스택 구축 벤치마크에서 Anthropic의 Fable, Claude Opus 4.8, OpenAI의 GPT-5.5와 나란히 95.56%를 찍으며 공동 1위에 올랐다.
단순한 체리피킹이나 뽀록이 아니다. Helper 모델을 바꿔가며 진행한 여러 테스트에서도 94~95%를 일관되게 방어했다. 이쯤 되면 ‘가성비 대안’이 아니라 진짜 ‘프론티어 1티어 깡패’로 대접해 줘야 한다.
댓글에서 실사용자들의 반응도 폭발적이다. 한 유저는 “하루 종일 Ollama로 GLM 5.2 + Claude Code를 썼는데, Opus 4.8과의 격차가 사라졌다”며 놀라움을 감추지 못했다. 이 벤치마크가 왜 의미 있는지, 실제 데이터가 말해주는 것은 무엇인지 살펴본다.
핵심 내용
1. 실험 설계: 무엇을 테스트했나
이 벤치마크가 단순한 “모델 A가 모델 B보다 낫다”식 비교가 아닌 이유는 실험 설계의 정교함에 있다. 모든 모델이 동일한 세부 사양으로 하나의 완전한 웹앱을 구축하라는 과제를 받는다. 단순히 UI를 만드는 수준이 아니라 다음 6가지 영역을 모두 충족해야 한다.
- 웹 서비스: HTTP 요청을 수락하고 올바른 응답을 반환
- 데이터 저장: 정보를 저장하고 안정적으로 조회
- 캐싱: 최근 결과를 재사용하고 데이터 변경 시 갱신
- 활동 로그: 발생한 이벤트를 규정된 형식으로 기록
- 웹 페이지: 브라우저에서 동작하는 인터페이스
- 신뢰성/보안: 동시 요청 처리 및 일반적인 보안 취약점 방어
프론트엔드, 백엔드, 데이터베이스, 캐싱, 보안까지 모두 걸쳐 있으니 어느 한 영역이 부족하면 점수가 깎인다. “코딩은 잘하지만 보안은 모르는” 모델이 높은 점수를 받기 어려운 구조다.
채점은 자동화된 테스트 + 4명의 독립적인 AI 심사위원으로 이루어지며, 표에는 가장 엄격한(가장 낮은) 점수가 기록된다. 관대한 점수 인플레이션이 없다.
2. 결과: 1티어의 재편성
상위권 결과를 요약하면 이렇다.
| 순위 | 구현 모델 | Helper | 점수 | 소요 시간 |
|---|---|---|---|---|
| 1 | Fable | Fable | 95.56% | 21분 |
| 1 | Opus 4.8 | Opus 4.8 | 95.56% | 50분 |
| 1 | GPT-5.5 | GPT-5.5 | 95.56% | 17분 |
| 1 | GLM 5.2 | GPT-5.5 | 95.56% | 77분 |
| 2 | Opus 4.7 | Opus 4.7 | 94.44% | 18분 |
| 2 | GLM 5.2 | GLM 5.2 | 94.44% | 37분 |
| 2 | GLM 5.1 | GPT-5.5 | 94.44% | 64분 |
세 가지가 눈에 띈다.
GLM 5.2는 혼자서도 94.44%를 달성했다. Helper로 GPT-5.5를 쓴 조합이 95.56%지만, GLM 5.2 단독 조합에서도 94.44%를 받았다. 다른 프런티어 모델의 도움 없이도 거의 동등한 수준의 코드를 작성한다는 뜻이다.
속도를 제외하면 격차가 없다. GLM 5.2 + GPT-5.5 조합은 77분이 걸렸지만 점수는 동일하다. 시간 효율에서는 GPT-5.5(17분)나 Fable(21분)이 압도적이지만, 코드 품질 자체는 같다. 비용 민감한 사용자에게 이건 강력한 시그널이다.
이전 세대(GLM 5.1)도 이미 강력했다. GLM 5.1 + GPT-5.5 조합이 94.44%로 Opus 4.7과 동점이다. ZAI의 모델 발전 속도가 결코 느리지 않다는 걸 보여준다.
3. 실사용자 반응: “Opus 4.8과의 격차가 사라졌다”
벤치마크 숫자보다 더 흥미로운 건 실제 사용자의 체감이다. 댓글에서 가장 많은 지지를 받은 u/Euino의 반응.
“하루 종일 Ollama로 GLM 5.2 + Claude Code를 썼다. 주로 비즈니스 전략 시나리오와 재무 시뮬레이션 작업이었는데, 정량적 기준은 없지만 응답의 느낌과 질이 놀라웠다. 지난주에 대체 Ollama 모델을 테스트했는데 모두 Opus 4.8과 큰 격차가 있었다. 이번엔 달랐다. 내일부터 GLM이 일상에 포함될 것이다.”
벤치마크 숫자를 보고 감동한 게 아니다. 자신의 실제 업무에 써보고 체감한 것이다. “내일부터 일상에 포함하겠다”는 결론에 도달했다. 벤치마크 점수보다 강력한 증거다.
또 다른 유저는 GLM 5.2의 접근성을 언급했다. ollama serve && ollama run glm-5.2:cloud면 라즈베리파이에서도 실행할 수 있다는 점. 하드웨어 장벽 없이 누구나 프런티어급 코딩 모델을 로컬에서 쓸 수 있다는 의미다.
왜 주목할까: 세 가지 의미
프런티어 모델의 탈서구화
지금까지 AI 모델 시장은 “미국 모델 vs 중국 모델”이라는 위계 구조가 비교적 명확했다. 중국 모델은 “가성비가 좋지만 최상위권은 아니다”라는 인식이 지배적이었다. 이 벤치마크는 그 위계를 깨부순다. 코딩 작업에서 GLM 5.2는 더 이상 “대안”이 아니라 동등한 1티어다.
단순한 기술적 성취를 넘어 정치·경제적 의미도 있다. 같은 날 Bloomberg가 보도한 G7 정상회담 AI 세션에서, 미국이 Anthropic 최고급 모델에 대한 접근을 동맹국에 제한하면서 외교적 마찰이 발생 중이라는 소식을 생각해보라. 미국 모델 접근이 정치적 카드가 되는 시대에 동등한 성능의 대안이 존재한다는 건 시장 전체의 균형추가 된다.
비용 구조의 전복
Fable과 Opus 4.8이 월 $200 이상의 프리미엄 구독 뒤에 있다면, GLM 5.2는 Ollama를 통해 무료로 로컬 실행할 수 있다(클라우드 API도 훨씬 저렴하다). 같은 95.56%의 코드 품질을 1/10 이하의 비용으로 얻을 수 있다면, 합리적인 개발자가 선택할 모델은 명확하다. 스타트업과 인디 개발자에게 이건 취향 문제가 아니라 생존 전략이다.
물론 속도에서는 차이가 있다. GPT-5.5가 17분 만에 끝내는 작업을 GLM 5.2는 77분이 걸린다. 하지만 “4배 느리지만 무료”와 “4배 빠르지만 비싸” 사이의 선택은 사용 사례에 따라 정답이 달라진다. 배치 작업이나 개인 프로젝트에서는 충분히 GLM이 이긴다.
에이전트 생태계의 다극화
이 벤치마크에서 흥미로운 디테일 하나. Helper 모델의 역할이다. GLM 5.2가 GPT-5.5를 Helper로 썼을 때 95.56%, 단독일 때 94.44%다. 모델 간 협업이 가능하고, 효과가 있다. 앞으로의 에이전트 시스템은 단일 모델으로 모든 것을 해결하는 게 아니라 각 모델의 강점을 조합하는 방향으로 갈 것이다. GLM 5.2가 그 생태계의 일등 시민이 되었다는 건 의미심장하다.
정리: 새로운 기준점
이 벤치마크가 말해주는 건 “GLM 5.2가 좋다”가 아니다. AI 코딩 모델 시장의 기준점 자체가 이동했다는 것.
2024년만 해도 “Fable 수준에 도달할 수 있겠느냐”가 질문이었다. 2025년 중반, GLM 5.1이 그에 근접했다. 그리고 2026년 6월, GLM 5.2가 같은 점수판에서 동점을 받았다. 다음 질문은 명확하다. GLM 5.3(또는 그 후속작)이 1위를 단독으로 차지하는 날이 언제일 것인가.
더 이상 “미국 모델 vs 중국 모델”이라는 단순한 이분법은 유효하지 않다. 코딩 벤치마크라는 가장 객관적인 잣대 위에서 ZAI의 GLM은 이미 프런티어다. 남은 건 우리가 그 사실을 얼마나 빨리 인정하느냐다.