Kimi K3.1, Artificial Analysis에서 55점 기록하며 파레토 라인에 위치

무슨 일이 있었나

Artificial Analysis는 AI 모델의 성능을 측정하는 곳입니다. 이곳이 Kimi K3.1 Pro를 평가했습니다. 이 모델은 지능 점수 55점을 받았습니다. 평가 기관은 이 모델이 가격 대비 성능이 괜찮은 편이라고 밝혔습니다. 다만 답을 만드는 속도는 느리고, 말이 아주 길다는 점도 함께 지적했습니다.

핵심 숫자

• 지능 점수: 55점 (비교 대상 중앙값은 27점)
• 속도: 초당 77개 토큰 (비교 대상 평균은 81)
• 비용: 입력 100만 토큰당 2달러, 출력 100만 토큰당 10달러
• 평가 1회당 비용: 약 2.11달러
• 답변 길이: 평가에서 1억 5천만 토큰 사용 (중앙값은 8,700만 토큰)

알아두면 좋은 개념

토큰은 AI가 글을 나누어 읽고 쓰는 작은 단위입니다. 보통 단어 일부나 한 단어에 해당합니다. 이 모델은 글과 이미지를 입력받을 수 있지만, 출력은 글만 합니다. 또 '추론 모델'이라서 답을 내기 전에 단계별로 생각하는 방식을 씁니다. 이 페이지는 그런 추론형 버전을 보여 주며, 추론을 하지 않는 버전도 있을 수 있습니다.

왜 중요한가

AI 모델은 점수가 높을수록 더 어려운 문제를 잘 풉니다. 이번 결과는 Kimi K3.1 Pro가 같은 가격대의 다른 모델들보다 똑똑하다는 뜻입니다. 하지만 속도가 느리고 답이 길면 실제로 쓰기 불편할 수 있습니다. 그래서 점수뿐 아니라 속도와 비용도 함께 봐야 합니다.

앞으로 지켜볼 점

• 다른 평가 기관들도 같은 점수가 나오는지
• 답변 길이를 줄여 비용과 속도가 좋아지는지
• 실제 사용자들이 이 모델을 얼마나 쓰는지