Blog
Kimi K3 achieves #3 in the Artificial Analysis Intelligence Index, comparable to Opus 4.8 and GPT-5.5
Artificial Analysis
2026.07.16
·LinkedIn·by Homin.Lee#Agent#AI#LLM#Multimodal#Open Weights
핵심 포인트
- 1Moonshot AI의 새로운 모델인 Kimi K3는 Artificial Analysis Intelligence Index에서 57점을 기록하며 GPT-5.5 및 Claude Opus 4.8과 대등한 성능을 보여주었습니다.
- 2Kimi K3는 GDPval-AA v2에서 1668의 Elo를 달성하고 AutomationBench-AA에서 1위를 차지하는 등 에이전트 작업 수행 능력이 크게 향상되었습니다.
- 3이전 모델인 K2.6 대비 토큰 효율성은 21% 개선되었으나, 할루시네이션 비율은 51%로 다소 증가했으며 향후 오픈 웨이트 공개가 예정되어 있습니다.
이 보고서는 Moonshot AI가 개발한 최신 거대 언어 모델인 Kimi K3의 성능, 경제성 및 기술적 사양을 다루고 있습니다. Kimi K3는 Artificial Analysis Intelligence Index에서 57점을 기록하며, Opus 4.8 및 GPT-5.5와 대등한 수준의 지능을 보유한 것으로 평가받습니다.
핵심 성능 및 지표
Kimi K3는 에이전트 작업 수행 능력에서 괄목할 만한 성장을 보였습니다.- GDPval-AA v2: 1668점의 Elo를 기록하여 이전 모델인 K2.6(1190점)을 크게 상회했습니다. 이는 GLM-5.2(1514점)와 GPT-5.5(1494점)를 능가하는 수치입니다.
- AutomationBench-AA: 53%의 점수로 1위를 차지하며 에이전트형 SaaS 워크플로우 자동화 능력을 입증했습니다.
- AA-Briefcase: 복합적인 지식 업무 수행력에서 Elo 1547점을 기록하여 Claude Fable 5에 이어 2위를 차지했습니다.
- AA-Omniscience Index: 정확도율이 33%에서 46%로 향상되며 인덱스 점수가 +6에서 +18로 개선되었습니다. 다만, 환각율(Hallucination rate)은 39%에서 51%로 다소 상승했습니다.
기술적 사양 및 방법론
- 모델 규모: 총 2.8T 파라미터를 보유하고 있으며, 이는 전작인 K2.6의 1T 파라미터 대비 대폭 확장된 규모입니다.
- 토큰 효율성: Kimi K3는 성능 향상과 동시에 토큰 효율성을 최적화했습니다. 전체 평가 과정에서 132M 출력 토큰을 사용하여 K2.6 대비 출력 토큰 사용량을 약 21% 절감했습니다.
- 다중 모달리티: 텍스트와 이미지에 대한 네이티브 멀티모달 입력(Native multimodal input)을 지원하며, 출력은 텍스트 전용 방식을 유지합니다.
- 컨텍스트 윈도우: 1M 토큰의 컨텍스트 창을 제공합니다.
경제성 및 배포 전략
- 비용 구조: API 가격은 입력/출력 토큰당 각각 15.00이며, 캐시된 입력(Cached input)은 90% 할인된 0.94로, 이는 GPT-5.6 Sol(1.80)의 절반 수준입니다.
- 오픈 웨이트 계획: 현재는 Moonshot AI의 퍼스트 파티 API를 통해서만 접근 가능하지만, 향후 모델 가중치(Weights)를 공개할 계획입니다. 공개 시 2.8T 파라미터 규모의 압도적인 성능을 바탕으로 오픈 웨이트 모델 생태계에서 선두를 차지할 것으로 전망됩니다.
요약하자면, Kimi K3는 고도의 에이전트 작업 지능과 향상된 토큰 효율성을 결합한 모델로, 특히 2.8T 파라미터라는 대규모 설계를 통해 복잡한 추론과 지식 업무에서 우수한 성능을 발휘합니다. 환각율 개선이라는 과제를 남겼으나, 가격 경쟁력과 향후 오픈 웨이트 공개 예정은 시장 내에서의 영향력을 크게 강화할 요소입니다.