Estimate from the version's published specs, benchmarks and reviews, 0-5; scores are only comparable within one criteria year. Scored as launched (Claude 3 Haiku, 13 Mar 2024): 200K-token context; list price $0.25 in / $1.25 out per 1M tokens = $0.50 blended at 3:1; text and image input. Speed null: Anthropic published only input throughput (21K tokens, about 30 pages, per second for prompts under 32K), not output tokens/s. Reasoning null (no launch-version AA index; Anthropic's family charts have no anchor). Coding null. Reviews: Zvi, Willison (family pricing post, written before Haiku shipped), Keywords AI (vendor test of ~100 prompts vs GPT-4 Turbo, 25 Mar 2024), Vellum (vendor comparison vs GPT-3.5 Turbo / GPT-4o mini, 19 Jul 2024). The Keywords AI and Vellum pieces are vendor blogs but report genuine tests.[1]
Claude Haiku is cheap, but it is tiny, and releasing cheap tiny models below the capabilities curve is fine.
Haiku's average generation time is 78% faster than GPT-4-preview-0125 (2.283s vs 10.475s)
GPT-4o Mini performs worse than GPT-3.5 Turbo and Claude 3 Haiku, sometimes missing the mark entirely.
Sonnet is cheaper than all of the GPT-4 models (including GPT-4 Turbo), and Haiku (which has not yet been released to the Claude API) will be cheaper even than GPT-3.5 Turbo.
| The new Claude 3 model family from Anthropic · 04.03.2024 | 0.50 |
|---|---|
| On Claude 3.0 · 06.03.2024 | 0.20 |
| Test Results: Claude Haiku can substitute GPT-4 in 95% of AI tasks at 4% Cost · 25.03.2024 | 0.60 |
| GPT-4o Mini v/s Claude 3 Haiku v/s GPT-3.5 Turbo: A Comparison · 19.07.2024 | 0.00 |
Fotos von Lesern, getrennt von den belegten Medien des Pins. Bewerte, was du gegessen oder gesehen hast, und markiere bei einem Restaurant-Pin die Gerichte direkt auf deinem Foto.
Der erste Eintrag ist immer die Quelle des Pins. Die Gesamtsicherheit ist ein gewichteter Durchschnitt, wie fest jeder Beleg die oben verwendeten Start- und Endzeiten stützt; ein Beleg zählt für je 180 Tage, die er älter ist als der neueste, nur halb so viel.
Anthropics Beitrag ist auf „Mar 13, 2024“ datiert: „Heute veröffentlichen wir Claude[2] 3 Haiku ... Das Modell ist jetzt zusammen mit Sonnet und Opus in der Claude API und auf claude.ai für unsere Claude-Pro-Abonnenten verfügbar“; AWS kündigte es am selben Tag auf Amazon[4] Bedrock an.
Anthropic[1][5] notified developers on 19 February 2026 that Claude Haiku 3 (claude-3-haiku-20240307) would be retired; it was retired on 20 April 2026, with claude-haiku-4-5-20251001 as the replacement.
SiliconANGLE's report: Haiku processes up to 21,000 tokens (about 30 pages) per second for prompts under 32,000 tokens, uses a 1:5 input-to-output pricing ratio, and joins Sonnet on Amazon[4] Bedrock, with Google Cloud Vertex AI coming soon.
AWS News Blog, published 2024-03-13T15:27-07:00: "Today, we are announcing the availability of Claude[2] 3 Haiku on Amazon Bedrock"; like Sonnet and Opus it has image-to-text vision, multilingual skills and a 200K context window.
The 4 March 2024 family launch, where Haiku was announced but not yet released ("Haiku will be available soon"): $0.25 per million input and $1.25 per million output tokens, a 200K context window, and it reads a ~10k-token arXiv paper with charts in under three seconds.[1]
Fehlt etwas oder stimmt etwas nicht? Sag es in deinen eigenen Worten: ein Link, der diesen Pin belegt, ein anderes Start- oder Enddatum und warum, oder eine Angabe, die fehlt oder falsch ist. Die KI prüft es an den Quellen dieses Pins, sucht nach besseren und ergänzt jede Seite, die dich bestätigt. Die eigenen Quellen des Pins zählen weiterhin am meisten. Auch Bilder sieht sich die KI an: Eines, das etwas anderes oder die Sache schlecht zeigt, wird nach hinten gestellt oder ersetzt.
Originaltitel: Claude 3 Haiku Released
| Benchmark | Claude 3 Haiku | GPT-3.5 | Gemini 1.0 Pro |
|---|---|---|---|
| Preis, Eingabe / Ausgabe | 0,25 $ / 1,25 $ | 0,50 $ / 1,50 $ | 0,47 $ / 1,42 $ |
| MMLU (Wissen auf Bachelor-Niveau) | 75,2 % 5-shot | 70,0 % 5-shot | 71,8 % 5-shot |
| GPQA, Diamond (Schlussfolgern auf Graduiertenniveau) | 33,3 % 0-shot CoT | 28,1 % 0-shot CoT | — |
| GSM8K (Grundschulmathematik) | 88,9 % 0-shot CoT | 57,1 % 5-shot | 86,5 % Maj1@32 |
| MATH (mathematisches Problemlösen) | 40,9 % 4-shot | 34,1 % 4-shot | 32,6 % 4-shot |
| MGSM (mehrsprachige Mathematik) | 76,5 % 8-shot | — | 63,5 % 8-shot |
| HumanEval (Code) | 75,9 % 0-shot | 48,1 % 0-shot | 67,7 % 0-shot |
| DROP, F1-Wert (Schlussfolgern über Text) | 78,4 3-shot | 64,1 3-shot | 74,1 variable Shot-Anzahl |
| BIG-Bench-Hard (gemischte Bewertungen) | 73,7 % 3-shot CoT | 66,6 % 3-shot CoT | 75,0 % 3-shot CoT |
| ARC-Challenge (Wissensfragen) | 89,2 % 25-shot | 85,2 % 25-shot | — |
| HellaSwag (Allgemeinwissen) | 85,9 % 10-shot | 85,5 % 10-shot | 84,7 % 10-shot |
| Vision-fähig | Ja | Nein | Ja |