La première entrée est toujours la source de l’épingle. La confiance globale est une moyenne pondérée de la fermeté avec laquelle chaque référence étaye les heures de début et de fin retenues ci-dessus ; une référence compte moitié moins pour chaque tranche de 180 jours d’ancienneté par rapport à la plus récente.
La fiche du modèle de Meta indique 'Model Release Date: 70B Instruct: December 6, 2024' ; l'article de TechCrunch[5] est daté du 6 décembre 2024 et OpenRouter[6] référence meta-llama/llama-3.3-70b-instruct comme créé le même jour.
Reproduces Meta's benchmark and pricing table: Llama 3.3 70B against Llama 3.1 70B and 405B, Amazon Nova Pro, Gemini Pro 1.5, GPT-4o and Claude 3.5 Sonnet, with a $0.1 input and $0.4 output per 1 million tokens row; notes training on over 15 trillion tokens to December 2023 and the 700 million monthly user cap.[1]
Secondary explainer: head-to-head with GPT-4o (IFEval 92.1 against 84.6, HumanEval 88.4 against 86.0, MMLU Pro 68.9 against 73.8), Artificial Analysis Quality Index 74 against 86 for o1-preview, and where to run it: Hugging Face[1], Ollama (about 42 GB), Groq, Deep Infra, Hyperbolic, Fireworks and Together AI.
Meta's model card: 70B text-in text-out, 128k context, GQA, 15T+ pretraining tokens with a December 2023 cutoff, over 25M synthetic fine-tuning examples, 7.0M H100 GPU hours and 12.9 tons CO2eq location-based, eight supported languages, and the instruction-tuned table against Llama 3.1 8B, 70B and 405B.[1]
Same-day report by Kyle Wiggers: Meta says it delivers the performance of Llama 3.1 405B at lower cost, Ahmad Al-Dahle's chart against Gemini 1.5 Pro, GPT-4o and Nova Pro, the 700-million-user licence clause, more than 650 million Llama downloads, Meta AI near 600 million monthly users, and Llama 4 needing 10x the compute.[1]
Il manque quelque chose ou une erreur s'est glissée ? Dites-le avec vos mots : un lien qui étaye cette épingle, une autre date de début ou de fin et pourquoi, ou une information absente ou erronée. L'IA la vérifie au regard des sources de l'épingle, en cherche de meilleures et ajoute toute page qui vous donne raison. Les sources de l'épingle restent celles qui comptent le plus. L'IA regarde aussi les images : une image qui montre autre chose, ou qui le montre mal, passe en dernier ou est remplacée.
Titre original: Llama 3.3 70B Released
| Benchmark | Llama 3.1 8B | Llama 3.1 70B | Llama 3.3 70B | Llama 3.1 405B |
|---|---|---|---|---|
| MMLU (CoT, 0-shot) | 73.0 | 86.0 | 86.0 | 88.6 |
| MMLU Pro (CoT, 5-shot) | 48.3 | 66.4 | 68.9 | 73.3 |
| IFEval | 80.4 | 87.5 | 92.1 | 88.6 |
| GPQA Diamond (CoT) | 31.8 | 48.0 | 50.5 | 49.0 |
| HumanEval (pass@1) | 72.6 | 80.5 | 88.4 | 89.0 |
| MBPP EvalPlus (base) | 72.8 | 86.0 | 87.6 | 88.6 |
| MATH (CoT) | 51.9 | 68.0 | 77.0 | 73.8 |
| BFCL v2 | 65.4 | 77.5 | 77.3 | 81.1 |
| MGSM | 68.9 | 86.9 | 91.1 | 91.6 |