Anthropic、これまでで最も安価で高速なモデル「Claude Haiku 5.5」を発表
重要ポイント
- •Haiku 5.5は、最大100,000トークンのプロンプトに対し、入力100万トークン当たり$0.10、出力100万トークン当たり$0.50で利用できる。Haiku 4.5から90%値下げされ、長いプロンプトやトークン化の違いを含めた平均削減幅は約75%とAnthropicは見積もっている。
- •新モデルの料金はOpenAIのGPT-6 Lunaと同じであり、両社の小型モデルを比較する際、公開ベンチマークが主な差別化要因となる。
- •Haiku 5.5はOSWorld 2.1のオフラインサブセットで72.4%、Terminal-Bench 4.0で39.2%を記録し、GPT-6 Lunaを両方のテストで上回ったが、Terminal-BenchにおけるClaude Sonnet 5.5の70.6%には届かなかった。
- •44職種の実際の専門業務をEloスケールで評価するGDPval-AA v2.では、Haiku 5.5が1620を記録し、Lunaの1437とHaiku 4.5の735を上回った。また、調整可能な努力設定を備えた初めてのHaikuモデルでもある。
- •今回の発表で、Opus 5.5とSonnet 5.5に続くClaude 5.5のラインアップが完成した。3モデルはClaudeのウェブサイト、AWS、Google Cloud、Azureで一般提供され、Sonnet 5.5のキャッシュ読み取り料金の半額化と、サブスクリプションプラン向けの新たな月額APIクレジットも導入された。
Anthropicは水曜日、Claude Haiku 5.5を発表し、同社が開発した中で最も安価かつ高速で高性能な小型モデルだと説明した。今回のリリースは、文書の要約やデータベースへの問い合わせといった大量処理に加え、ライブカスタマーサポートやユーザーに代わるウェブブラウザー操作など、速度が重視される用途を対象としている。カスタマーサポートのチャットや長文メールの要約は、AnthropicがHaikuシリーズ向けに開発したタスクであり、基本的には反復的で簡単な、非創造的な作業だ。
発表時に公開された数値によると、Haiku 5.5はOSWorld 2.1のオフラインサブセットで72.4%、Terminal-Bench 4.0で39.2%を記録した。これは両方のテストでOpenAIのGPT-6 Lunaを上回る結果だが、Claude Sonnet 5.5の70.6%というスコアには大きく及ばない。
Claudeを自社製品に組み込む開発者は、最大100,000トークンのプロンプトについて、入力100万トークン当たり$0.10、出力100万トークン当たり$0.50を支払う。トークンとは、AIモデルが読み書きする小さなテキスト単位で、1語のおよそ4分の3に相当し、大手AI企業がAPI利用料を請求する際の単位でもある。新料金は、OpenAIが競合する小型モデルGPT-6 Lunaを9月22日に発売した際に設定した料金と同じだ。この料金帯では価格が同一になったため、両社の小型モデルを比較する際、コストだけでは差がつかず、開発者が選択するうえで公開ベンチマークが判断材料となる。
Haiku 4.5の同じ料金帯は$1と$5だったため、新料金は90%安くなった。一方、100,000トークンを超えるプロンプトには50%の値下げが適用される。旧モデルへのリクエストの約90%がこの水準を下回っており、Haiku 5.5は前モデルよりテキストをわずかに多くのトークンに分割するため、Anthropicは平均的な削減幅を約75%と見積もっている。Haikuシリーズが対象とする反復的で大量の処理では、1トークン当たりの料金が最も重要なコスト要因となる。API料金は、処理が送受信するトークン数に正比例して増えるためだ。
ベンチマークの数値は、これが決して弱いモデルではないことを示している。OSWorld 2.1は、AIが長く複数の手順を要するタスクを通じて実際のコンピューターを操作できるかを測るテストで、部分点を含む割合で採点される。Haiku 5.5は、72.4%対48.9%の成功率でOpenAIのGPT-6 Lunaを上回った。
Terminal-Bench 4.0では、AIエージェントが自らコマンドを入力して専門的なタスクを完了する。スコアは、初回の試行で正しく完了した割合だ。Haiku 5.5は39.2%で、OpenAIのLunaの16.4%、Haiku 4.5の0%を上回った。比較として、Claude Sonnet 5.5は同じテストで70.6%を記録した。
GDPval-AA v2.は、チェスから借用した対戦型の評価システムであるEloスケールを使い、44職種にわたる実際の専門業務でモデルを評価する。Haiku 5.5は1620を記録し、Lunaは1437、Haiku 4.5は735だった。
Haiku 5.5は、調整可能な努力設定を備えた初めてのHaikuモデルでもある。これは、コストを高める代わりに、より賢い回答を得るための調整機能だ。
Decryptによる実機テストでは、注意が必要であることが浮き彫りになった。簡単な論理問題を与えたところ、モデルはほぼ瞬時に回答するほど非常に高速だったが、答えは間違っていた。小型モデルの出力を盲目的に信頼すべきではないことを示す結果だ。
今回の発表に合わせ、AnthropicはSonnet 5.5のキャッシュ読み取り料金も、100万トークン当たり$0.10へと半額にした。これは、モデルがすでに処理したテキストに適用される割引料金で、アプリケーションがモデルに読み取り済みの情報を再利用するたびに発生するコストだ。
Haiku 5.5は、9月22日に発売されたOpus 5.5の15日後、9月28日に発売されたSonnet 5.5の9日後に登場した。これにより、Anthropicが約束していた3つのClaude 5.5モデルの最後のモデルとなる。Opus 5.5は、CEOのDario Amodei氏がAIの能力向上を業界全体で減速させるよう促す論文を発表して以来、同社が初めてリリースしたモデルだった。
Haiku 5.5は現在、Claudeのウェブサイト、Amazon Web Services、Google Cloud、Microsoft Azureで、claude-haiku-5-5という名称で利用できる。Claude 5.5ファミリーの3モデルすべてが現在、一般提供されている。開発者にとって、この完全なファミリーはコストと性能のトレードオフを具体的に示すものとなる。一方にはHaiku 5.5の料金があり、もう一方にはAnthropicが公開したSonnet 5.5のより高いベンチマークスコアがある。
Anthropicは今週、月額APIクレジットの提供も開始する。Max 5xプランの加入者には$100、Max 20xには$200、Teamプランにはユーザー間で共有できる最大$500が付与される。
