EXPLORINEER
ja

アーカイブ — US — techcrunch

Anthropicの最新フラッグシップAI、驚くほどのトレーニングコストはかからなかった可能性あり

AnthropicのClaude 3.7 Sonnet AIモデルは、1兆を下回るFLOPsを使って、数千万ドルの訓練費用でトレーニングされました。これは、最先端モデルの訓練コストが低下していることを示しています。2023年の高コストモデルであるOpenAIのGPT-4やGoogleのGemini Ultraとは異なり、将来のモデルは複雑性が増すため、より高価になると予想されています。

要点

  • Claude 3.7 Sonnetのトレーニングコストは、数千万ドルと推定されています。
  • トレーニングに使用されたFLOPsは10^26未満であり、計算要件が削減されていることを示唆しています。
  • Claude 3.5などの以前のモデルも同様のコストを持っており、トレーニング費用が減少傾向にあることを示しています。
  • OpenAIとGoogleは、それぞれトップモデルに1億ドル以上とほぼ2億ドルを費やしました。
  • AnthropicのCEOは、現在のコストは低いものの、将来のモデルは数十億に達する可能性があると述べています。
  • トレーニングコストには、安全テストや基礎研究などの関連費用は含まれません。

なぜ重要か

  • 訓練費用の低下傾向は、計算能力の向上とAIの効率性の向上と一致しています。
  • 歴史的に、AI業界では訓練費用が変動し、2023年には先端モデルへの大規模な投資が行われました。
  • より複雑な推論モデルへの移行は、訓練費用の現在の低下にもかかわらずコストを押し上げる可能性があります。

Claude 3.7 Sonnetの導入は、高度なAIモデルのトレーニングコストが大幅に削減されていることを示しています。しかし、将来の展望では、より大きな投資が必要とされる可能性があり、AIトレーニングの経済環境が変化していることが明らかになっています。