Estimate from the version's published specs, benchmarks and reviews, 0-5; scores are only comparable within one criteria year. Scored as launched (Claude 3 Haiku, 13 Mar 2024): 200K-token context; list price $0.25 in / $1.25 out per 1M tokens = $0.50 blended at 3:1; text and image input. Speed null: Anthropic published only input throughput (21K tokens, about 30 pages, per second for prompts under 32K), not output tokens/s. Reasoning null (no launch-version AA index; Anthropic's family charts have no anchor). Coding null. Reviews: Zvi, Willison (family pricing post, written before Haiku shipped), Keywords AI (vendor test of ~100 prompts vs GPT-4 Turbo, 25 Mar 2024), Vellum (vendor comparison vs GPT-3.5 Turbo / GPT-4o mini, 19 Jul 2024). The Keywords AI and Vellum pieces are vendor blogs but report genuine tests.[1]
Claude Haiku is cheap, but it is tiny, and releasing cheap tiny models below the capabilities curve is fine.
Haiku's average generation time is 78% faster than GPT-4-preview-0125 (2.283s vs 10.475s)
GPT-4o Mini performs worse than GPT-3.5 Turbo and Claude 3 Haiku, sometimes missing the mark entirely.
Sonnet is cheaper than all of the GPT-4 models (including GPT-4 Turbo), and Haiku (which has not yet been released to the Claude API) will be cheaper even than GPT-3.5 Turbo.
| The new Claude 3 model family from Anthropic · 4 thg 3, 2024 | 0.50 |
|---|---|
| On Claude 3.0 · 6 thg 3, 2024 | 0.20 |
| Test Results: Claude Haiku can substitute GPT-4 in 95% of AI tasks at 4% Cost · 25 thg 3, 2024 | 0.60 |
| GPT-4o Mini v/s Claude 3 Haiku v/s GPT-3.5 Turbo: A Comparison · 19 thg 7, 2024 | 0.00 |
Ảnh của độc giả, tách biệt với phương tiện có nguồn của ghim. Hãy chấm điểm món bạn đã ăn hoặc thấy, và với ghim nhà hàng, gắn thẻ món ngay trên ảnh của bạn.
Mục đầu tiên luôn là nguồn của ghim. Độ tin cậy tổng thể là trung bình có trọng số về mức độ mỗi tài liệu ủng hộ thời điểm bắt đầu và kết thúc được dùng ở trên; một tài liệu được tính giảm một nửa cho mỗi 180 ngày cũ hơn tài liệu mới nhất.
Bài đăng của Anthropic[5] đề ngày “Mar 13, 2024”: “Hôm nay chúng tôi phát hành Claude[2] 3 Haiku ... Mô hình hiện có cùng Sonnet và Opus trên Claude API và trên claude.ai cho người đăng ký Claude Pro của chúng tôi”; AWS đã công bố nó trên Amazon[4] Bedrock cùng ngày.
Anthropic[1][5] notified developers on 19 February 2026 that Claude Haiku 3 (claude-3-haiku-20240307) would be retired; it was retired on 20 April 2026, with claude-haiku-4-5-20251001 as the replacement.
SiliconANGLE's report: Haiku processes up to 21,000 tokens (about 30 pages) per second for prompts under 32,000 tokens, uses a 1:5 input-to-output pricing ratio, and joins Sonnet on Amazon[4] Bedrock, with Google Cloud Vertex AI coming soon.
AWS News Blog, published 2024-03-13T15:27-07:00: "Today, we are announcing the availability of Claude[2] 3 Haiku on Amazon Bedrock"; like Sonnet and Opus it has image-to-text vision, multilingual skills and a 200K context window.
The 4 March 2024 family launch, where Haiku was announced but not yet released ("Haiku will be available soon"): $0.25 per million input and $1.25 per million output tokens, a 200K context window, and it reads a ~10k-token arXiv paper with charts in under three seconds.[1]
Thiếu hay sai điều gì? Hãy nói bằng lời của bạn: một liên kết củng cố ghim này, một ngày bắt đầu hoặc kết thúc khác kèm lý do, hoặc một thông tin còn thiếu hay sai. AI đối chiếu với các nguồn của ghim này, tìm nguồn tốt hơn và thêm mọi trang ủng hộ bạn. Các nguồn của chính ghim vẫn được tính nhiều nhất. Hình ảnh thể hiện nội dung khác hoặc thể hiện kém cũng được xem xét, rồi bị hạ xuống hoặc thay thế.
Tiêu đề gốc: Claude 3 Haiku Released
| Chuẩn đánh giá | Claude 3 Haiku | GPT-3.5 | Gemini 1.0 Pro |
|---|---|---|---|
| Giá, đầu vào / đầu ra | $0.25 / $1.25 | $0.50 / $1.50 | $0.47 / $1.42 |
| MMLU (kiến thức trình độ đại học) | 75.2% 5-shot | 70.0% 5-shot | 71.8% 5-shot |
| GPQA, Diamond (suy luận trình độ sau đại học) | 33.3% 0-shot CoT | 28.1% 0-shot CoT | — |
| GSM8K (toán tiểu học) | 88.9% 0-shot CoT | 57.1% 5-shot | 86.5% Maj1@32 |
| MATH (giải toán) | 40.9% 4-shot | 34.1% 4-shot | 32.6% 4-shot |
| MGSM (toán đa ngôn ngữ) | 76.5% 8-shot | — | 63.5% 8-shot |
| HumanEval (mã) | 75.9% 0-shot | 48.1% 0-shot | 67.7% 0-shot |
| DROP, điểm F1 (suy luận trên văn bản) | 78.4 3-shot | 64.1 3-shot | 74.1 số shot thay đổi |
| BIG-Bench-Hard (đánh giá hỗn hợp) | 73.7% 3-shot CoT | 66.6% 3-shot CoT | 75.0% 3-shot CoT |
| ARC-Challenge (hỏi đáp kiến thức) | 89.2% 25-shot | 85.2% 25-shot | — |
| HellaSwag (kiến thức thông thường) | 85.9% 10-shot | 85.5% 10-shot | 84.7% 10-shot |
| Hỗ trợ thị giác | Có | Không | Có |