確定日付の確度: 確定確定として発表情報源が日付をどれだけ確定的に述べているか：確定、予定、推定、延期、未確認。「確定」のピンをすべて表示確度 90%総合信頼度: 90%ピンの情報源と参照がその日付をどれだけ裏付けているか。出典を含む 6 件の資料がピンの開始・終了時刻をどれだけ強く裏付けているかの加重平均。最新の資料より180日古くなるごとに重みは半分になります確度75%以上のピンをすべて表示
Claude[2][3]のリリースノートには「November 4th, 2024 Claude Haiku 3.5がテキスト専用モデルとしてClaude APIで利用可能になりました」とある。TechCrunch[4]（2024年11月4日午前10時24分PST）は「Anthropic[1][6]の最新AIモデルが登場した」と報じ、AWSも同日Bedrockでの提供開始を発表した。10月22日の投稿では「今月末までにリリースされる」とされていた。- 開始
- 2024年11月4日確度 92%platform.claude.com
Claude 3.5 Haikuがリリース
原文から自動翻訳されています
元のタイトル: Claude 3.5 Haiku Released
Anthropicは、Claude API、Amazon Bedrock、Vertex AIでClaude 3.5 Haikuをリリースした。これはテキスト専用の小型モデルで、多くのベンチマークでClaude 3 Opusを上回るとされ、価格は入力100万トークンあたり1ドルとClaude 3 Haikuの4倍である。
- Anthropicは2024年10月22日、アップグレード版のClaude 3.5 Sonnetおよびコンピュータ操作機能と共にClaude 3.5 Haikuを発表し、11月4日にClaude API、Amazon Bedrock、Google Cloud Vertex AIでリリースした。[2][5][6]
- 価格は入力100万トークンあたり1ドル、出力100万トークンあたり5ドルで発売され、これはClaude 3 Haikuの4倍にあたる。Anthropicは、最終テストにおいて本モデルが「多くのベンチマークで前世代の主力モデルであるClaude 3 Opusを上回った」と述べていた。[4]
- 提供はテキスト専用で、Claude 3 Haikuは「最大限のコスト効率と画像処理」を必要とするユーザー向けに継続提供され、ビジョン対応は2025年2月24日に追加された。[2][4]
- Anthropicは2024年12月3日付の更新で、価格を100万トークンあたり0.80ドルと4ドルに引き下げた。[6]
- 2025年12月19日に非推奨となり、2026年2月19日にClaude APIから提供終了となって、Claude Haiku 4.5に置き換えられた。[3]
注目の機能
- Anthropicの最速モデルの次世代版であり、Claude 3 Haikuと同程度の速度で「あらゆるスキルセットにおいて改善されており」、多くの点で当初のClaude 3.5 SonnetおよびClaude 3 Opusに匹敵する。[1][6]
- コーディング: SWE-bench Verifiedで40.6%と、当初のClaude 3.5 Sonnetの33.4%やClaude 3 Opusの22.2%を上回り、Anthropic社内のエージェント型コーディングテストでは74%を記録し、Opusの38%を上回った。[1][6]
- その他の報告スコア: HumanEvalで88.1%、GPQA Diamondで41.6%、MMLU Proで65.0%、TAU-bench小売部門で51.0%と、Claude 3 Haikuの75.9%、33.3%、49.0%、18.2%を上回った。[1]
- 知識のカットオフはClaude 3 Haikuより新しい2024年7月で、出力もより長い。ユーザー向けプロダクト、サブエージェントのタスク、大規模データセットからのパーソナライズ向けに位置づけられている。[1][4][6]
ベンチマーク[6]
| ベンチマーク | Claude 3.5 Sonnet (new) | Claude 3.5 Haiku | Claude 3.5 Sonnet | GPT-4o* | GPT-4o mini* | Gemini 1.5 Pro | Gemini 1.5 Flash |
|---|---|---|---|---|---|---|---|
| GPQA (Diamond) (大学院レベルの推論) | 65.0% 0ショットCoT | 41.6% 0ショットCoT | 59.4% 0ショットCoT | 53.6% 0ショットCoT | 40.2% 0ショットCoT | 59.1% 0ショットCoT | 51.0% 0ショットCoT |
| MMLU Pro (大学レベルの知識) | 78.0% 0ショットCoT | 65.0% 0ショットCoT | 75.1% 0ショットCoT | — | — | 75.8% 0ショットCoT | 67.3% 0ショットCoT |
| HumanEval (コード) | 93.7% 0ショット | 88.1% 0ショット | 92.0% 0ショット | 90.2% 0ショット | 87.2% 0ショット | — | — |
| MATH (数学の問題解決) | 78.3% 0ショットCoT | 69.2% 0ショットCoT | 71.1% 0ショットCoT | 76.6% 0ショットCoT | 70.2% 0ショットCoT | 86.5% 4ショットCoT | 77.9% 4ショットCoT |
| AIME 2024 (高校数学コンテスト) | 16.0% 0ショットCoT | 5.3% 0ショットCoT | 9.6% 0ショットCoT | 9.3% 0ショットCoT | — | — | — |
| MMMU (視覚的な質疑応答) | 70.4% 0ショットCoT | — | 68.3% 0ショットCoT | 69.1% 0ショットCoT | 59.4% 0ショットCoT | 65.9% 0ショットCoT | 62.3% 0ショットCoT |
| SWE-bench Verified (エージェント型コーディング) | 49.0% | 40.6% | 33.4% | — | — | — | — |
| TAU-bench (エージェント型ツール利用) | 小売 69.2%, 航空 46.0% | 小売 51.0%, 航空 22.8% | 小売 62.6%, 航空 36.0% | — | — | — | — |
* Anthropicの評価表では、応答前に大量の計算時間を要し比較が難しくなるため、OpenAIのo1モデルファミリーは除外されている。
購入Claude