- 开始
- 2024年11月4日可信度 92%来自platform.claude.com
Claude 3.5 Haiku 发布
由原文自动翻译
原标题: Claude 3.5 Haiku Released
- Anthropic 于 2024 年 10 月 22 日在发布升级版 Claude 3.5 Sonnet 和计算机操作功能时宣布了 Claude 3.5 Haiku,并于 11 月 4 日在 Claude API、Amazon Bedrock 和 Google Cloud 的 Vertex AI 上发布[2][5][6]
- 发布时定价为每百万输入 token 1 美元、每百万输出 token 5 美元,是 Claude 3 Haiku 价格的四倍,此前 Anthropic 表示在最终测试中该模型“在许多基准测试上已超越我们此前的旗舰模型 Claude 3 Opus”[4]
- 该模型上线时仅支持文本;对于需要“最高成本效益和图像处理”的用户,Claude 3 Haiku 仍然可用,视觉支持于 2025 年 2 月 24 日加入[2][4]
- Anthropic 在 2024 年 12 月 3 日的一次更新中将价格下调为每百万 token 0.80 美元和 4 美元[6]
- 于 2025 年 12 月 19 日被弃用,并于 2026 年 2 月 19 日从 Claude API 退役,由 Claude Haiku 4.5 取代[3]
值得关注的功能
- Anthropic 最快模型的新一代产品:速度与 Claude 3 Haiku 相近,却“在每一项技能上都有所提升”,在很多情况下能匹敌初代 Claude 3.5 Sonnet 和 Claude 3 Opus[1][6]
- 编程能力:SWE-bench Verified 得分 40.6%,高于初代 Claude 3.5 Sonnet 的 33.4% 和 Claude 3 Opus 的 22.2%;在 Anthropic 内部的智能体编程测试中得分 74%,而 Opus 为 38%[1][6]
- 其他公布成绩:HumanEval 得分 88.1%,GPQA Diamond 得分 41.6%,MMLU Pro 得分 65.0%,TAU-bench 零售场景得分 51.0%,而 Claude 3 Haiku 分别为 75.9%、33.3%、49.0% 和 18.2%[1]
- 知识截止日期为 2024 年 7 月,比 Claude 3 Haiku 更新,输出长度也更长;主要面向用户交互产品、子智能体任务以及基于大型数据集的个性化定制[1][4][6]
基准测试[6]
| 基准测试 | Claude 3.5 Sonnet(新版) | Claude 3.5 Haiku | Claude 3.5 Sonnet | GPT-4o* | GPT-4o mini* | Gemini 1.5 Pro | Gemini 1.5 Flash |
|---|---|---|---|---|---|---|---|
| GPQA(Diamond)(研究生水平推理) | 65.0% 0-shot CoT | 41.6% 0-shot CoT | 59.4% 0-shot CoT | 53.6% 0-shot CoT | 40.2% 0-shot CoT | 59.1% 0-shot CoT | 51.0% 0-shot CoT |
| MMLU Pro(本科水平知识) | 78.0% 0-shot CoT | 65.0% 0-shot CoT | 75.1% 0-shot CoT | — | — | 75.8% 0-shot CoT | 67.3% 0-shot CoT |
| HumanEval(代码) | 93.7% 0-shot | 88.1% 0-shot | 92.0% 0-shot | 90.2% 0-shot | 87.2% 0-shot | — | — |
| MATH(数学问题求解) | 78.3% 0-shot CoT | 69.2% 0-shot CoT | 71.1% 0-shot CoT | 76.6% 0-shot CoT | 70.2% 0-shot CoT | 86.5% 4-shot CoT | 77.9% 4-shot CoT |
| AIME 2024(高中数学竞赛) | 16.0% 0-shot CoT | 5.3% 0-shot CoT | 9.6% 0-shot CoT | 9.3% 0-shot CoT | — | — | — |
| MMMU(视觉问答) | 70.4% 0-shot CoT | — | 68.3% 0-shot CoT | 69.1% 0-shot CoT | 59.4% 0-shot CoT | 65.9% 0-shot CoT | 62.3% 0-shot CoT |
| SWE-bench Verified(智能体编程) | 49.0% | 40.6% | 33.4% | — | — | — | — |
| TAU-bench(智能体工具使用) | 零售 69.2%,航空 46.0% | 零售 51.0%,航空 22.8% | 零售 62.6%,航空 36.0% | — | — | — | — |
* Anthropic 的评测表未纳入 OpenAI 的 o1 模型系列,该系列依赖大量的响应前计算时间,使比较变得困难。
参考资料 6可信度 90%总体可信度: 90%该图钉的来源和参考资料对其日期的支持程度。包括来源在内的 6 份资料对图钉开始和结束时间支持程度的加权平均；资料每比最新的一份旧 180 天，权重减半显示所有可信度不低于 75% 的图钉
第一项始终是图钉的来源。总体可信度是各份资料对上方所用开始和结束时间支持程度的加权平均；资料每比最新的一份旧 180 天，权重减半。
- [1]90%assets.anthropic.com/m/1cd9d098ac3e6467/original/Claude-3-Model-Card-October-Addendum.pdfassets.anthropic.com· 发布于 2026年9月28日· 开始 2024年11月4日· 占评分 31%
Claude[2][3] 的发布说明写道:“2024 年 11 月 4 日,Claude Haiku 3.5 现已作为纯文本模型在 Claude API 上可用”;TechCrunch[4](太平洋时间 2024 年 11 月 4 日上午 10:24)报道“Anthropic[6] 最新的人工智能模型已经到来”,AWS 也在同一天发布了 Bedrock 上线的消息。10 月 22 日的文章曾说该模型“将于本月晚些时候发布”。
- [2]92%Claude Platform release notes - Claude Platform Docsplatform.claude.com· 添加于 2026年9月28日· 开始 2024年11月4日 ✓· 占评分 31%
Anthropic's[1][6] own dated changelog: "November 4th, 2024 Claude[3] Haiku 3.5 is now available on the Claude API as a text-only model", and on 24 February 2025 "We've added vision support to Claude Haiku 3.5". The model card addendum that is the source carries no release date, so this entry dates the pin.
- [3]90%Model deprecations - Claude Platform Docsplatform.claude.com· 添加于 2026年9月28日· 占评分 31%
Anthropic[1][6] notified developers on 19 December 2025 that Claude[2] Haiku 3.5 (claude-3-5-haiku-20241022) would be retired; it was retired on 19 February 2026, with claude-haiku-4-5-20251001 as the replacement.
- [4]88%Anthropic hikes the price of its Haiku modeltechcrunch.com· 发表于 2024年11月4日· 开始 2024年11月4日· 占评分 2%
TechCrunch (Kyle Wiggers, 10:24 AM PST, 4 November 2024): "Anthropic's[1][6] newest AI model has arrived"; it costs $1 per million input and $5 per million output tokens against Claude[2][3] 3 Haiku's $0.25 and $1.25, "a 4x hike", quoting Anthropic that "we've increased pricing for Claude 3.5 Haiku to reflect its increase in intelligence", and it launches without image analysis.
- [5]85%Anthropic's Claude 3.5 Haiku model now available in Amazon Bedrockaws.amazon.com· 发表于 2024年11月4日· 开始 2024年11月4日· 占评分 2%
AWS What's New, "Posted on: Nov 4, 2024": Claude[2][3] 3.5 Haiku is now available in Amazon Bedrock and "surpasses even Claude 3 Opus, the largest model in Anthropic's[1][6] previous generation, on many intelligence benchmarks—including coding".
建议更正
有遗漏或错误吗？用你自己的话说明：能佐证此图钉的链接、不同的开始或结束日期及理由，或缺失、有误的信息。AI 会对照此图钉的来源进行核实，搜索更好的来源，并添加任何支持你说法的页面。图钉自身的来源仍然最重要。AI 也会查看图片：显示的是别的东西或显示效果差的图片会被移到后面或替换。
