Hacker News
Kimi K3.1、Artificial Analysisで55点を獲得しパレートライン上に位置
AI初登場 77ポイントコメント6件
Kimi K3.1 Pro は、AI の賢さを測る Artificial Analysis のテストで 55 点を取りました。価格は手頃ですが、答えが長く、動作はやや遅いモデルです。
何が起きたのか
Artificial Analysis という会社が、Kimi K3.1 Pro を調べて結果を発表しました。このモデルは「賢さ」の点数が高く、同じくらいの価格のモデルの中では良い位置にあります。ただし、文章を出す速さは平均より遅く、答えがとても長くなる傾向があります。
数字で見る主な結果
- 賢さのスコア:55 点(同じ種類のモデルの中央値は 27 点)
- 速さ:毎秒 77 トークン(平均は 81 トークン)
- 価格:入力 100 万トークンあたり 2.00 ドル、出力 100 万トークンあたり 10.00 ドル
- テスト 1 回あたりの費用:約 2.11 ドル
- 文章の長さ:テストで 1.5 億トークンを出力(中央値は 8,700 万トークン)
ちょっとした用語の説明
「トークン」とは、AI が文章を読んだり書いたりするときの小さな単位で、だいたい単語の一部にあたります。「コンテキストウィンドウ」は、AI が一度に覚えておける文章の量のことです。このモデルは 100 万トークンまで扱えます。画像を入力でき、出力は文字だけです。
なぜ大事なのか
賢さと値段のバランスが良いモデルは、学校や仕事で使いやすくなります。一方で、答えが長すぎたり遅かったりすると、実際に使うときに時間や費用がかかります。点数だけでなく、速さや費用も合わせて見ることが大切です。
これから注目したい点
- 実際に使った人から、速さや答えの長さについての評価が出るか
- 他社の同じくらいの価格のモデルと比べて、順位がどう変わるか
- 非推論版(reasoning ではない版)が出るかどうか
用語解説
- Artificial Analysis
- AI モデルの賢さ、速さ、値段を比べて評価する会社や分析サイトです。
- トークン
- AI が文章を扱うときの小さな単位で、単語の一部にあたります。
- コンテキストウィンドウ
- AI が一度に読んで覚えておける文章の量の上限です。
- Kimi K3.1 Pro
- Kimi という名前の AI モデルで、このテストの対象になったものです。