Kimi K3.1 Pro (Max), 문샷AI 코딩 모델 LMArena 웹 개발 부문 8위로 첫 진입
문샷AI의 Kimi K3.1 Pro (Max)가 AI 코딩 실력을 겨루는 순위표에 처음 오르자마자 10위 안에 들었다. LMArena가 10월 23일 공개한 웹 개발(코딩) 부문 리더보드 자료에 따르면, 이번에 새로 집계된 Kimi K3.1 Pro (Max)는 투표 2,451표를 바탕으로 8위에 올랐다. 1위는 앤트로픽의 Claude Opus 5.5 (Max)였다.
LMArena는 옛 이름이 Chatbot Arena인 AI 모델 비교 플랫폼이다. 사용자는 어느 모델이 낸 답인지 모르는 상태에서 두 모델의 결과물을 비교해 더 나은 쪽에 표를 준다. 이렇게 모인 표로 체스 순위에 쓰는 Elo 계열 방식의 점수를 추정해 순위를 매긴다. 웹 개발 부문에서는 웹 페이지나 앱 코드를 만들어 달라는 요청에 각 모델이 내놓은 결과물을 놓고 사람들이 투표한다. 벤치마크 시험 점수와 달리 실제 사용자가 어느 쪽을 더 낫다고 느꼈는지가 그대로 순위에 반영된다.
이번 웹 개발 부문 상위 10위는 다음과 같다. 1위 Claude Opus 5.5 (Max)(앤트로픽), 2위 GPT-6 Astra (Max)(오픈AI), 3위 Claude Sonnet 5.5 (xHigh)(앤트로픽), 4위 GPT-6.1 Sol (Max)(오픈AI), 5위 Claude Fable 5.1 (Max)(앤트로픽), 6위 Muse Wonder Full (Max)(메타), 7위 Claude Sonnet 5.5 (High)(앤트로픽), 8위 Kimi K3.1 Pro (Max)(문샷AI), 9위 Claude Opus 5 (Max)(앤트로픽), 10위 GPT-6 Sol (Max)(오픈AI).
회사별로 보면 앤트로픽이 1·3·5·7·9위에 모델 다섯 개를 올려 상위권의 절반을 차지했다. 오픈AI는 2·4·10위에 세 개, 메타는 6위에 한 개를 올렸다. 상위 10위 가운데 앤트로픽·오픈AI·메타가 아닌 회사의 모델은 Kimi K3.1 Pro (Max) 하나뿐이다. 새로 집계되자마자 이 세 회사 모델들 사이에 끼어든 셈이다.
순위표에서는 같은 모델이 괄호 안 표기에 따라 따로 집계된 경우도 보인다. Claude Sonnet 5.5는 (xHigh) 표기로 3위, (High) 표기로 7위에 각각 이름을 올렸다. 최신 모델과 바로 앞 세대 모델이 함께 10위 안에 든 것도 눈에 띈다. 앤트로픽은 Claude Opus 5.5 (Max)가 1위, Claude Opus 5 (Max)가 9위였고, 오픈AI는 GPT-6.1 Sol (Max)가 4위, GPT-6 Sol (Max)가 10위였다.
다만 이 순위를 모델 간 실력 차이로 그대로 읽어서는 안 된다. LMArena 점수는 투표로 추정한 값이라 오차 범위가 있다. 점수 차가 작으면 순위가 갈렸어도 실제 실력이 다르다고 단정하기 어렵다. LMArena가 통계적으로 두 모델을 구분하지 못하면 같은 순위로 표시한다. 이번에 처음 집계된 Kimi K3.1 Pro (Max)의 8위도 2,451표를 기준으로 한 결과다. 투표가 더 쌓이면 점수와 순위가 달라질 수 있다.
그래도 이 리더보드는 코딩용 AI를 고르려는 개발자에게 쓸모 있는 참고 자료다. 사람들이 실제로 비교해 보고 고른 결과라서 어느 모델의 결과물이 더 쓸 만하다고 느껴지는지를 가늠할 수 있다. LMArena는 리더보드 데이터를 CC BY 4.0 라이선스로 공개하고 있어 누구나 출처를 밝히면 내려받아 다시 분석할 수 있다.
