첫 번째 항목은 항상 핀의 출처입니다. 전체 신뢰도는 각 자료가 위의 시작·종료 시각을 얼마나 확실히 뒷받침하는지에 대한 가중 평균이며, 자료는 최신 자료보다 180일 오래될 때마다 가중치가 절반이 됩니다.
Meta의 모델 카드에는 'Model Release Date: 70B Instruct: December 6, 2024'로 적혀 있고, TechCrunch[5] 보도 날짜는 2024년 12월 6일이며, OpenRouter[6]도 meta-llama/llama-3.3-70b-instruct가 같은 날 생성된 것으로 표시한다.
Reproduces Meta's benchmark and pricing table: Llama 3.3 70B against Llama 3.1 70B and 405B, Amazon Nova Pro, Gemini Pro 1.5, GPT-4o and Claude 3.5 Sonnet, with a $0.1 input and $0.4 output per 1 million tokens row; notes training on over 15 trillion tokens to December 2023 and the 700 million monthly user cap.[1]
Secondary explainer: head-to-head with GPT-4o (IFEval 92.1 against 84.6, HumanEval 88.4 against 86.0, MMLU Pro 68.9 against 73.8), Artificial Analysis Quality Index 74 against 86 for o1-preview, and where to run it: Hugging Face[1], Ollama (about 42 GB), Groq, Deep Infra, Hyperbolic, Fireworks and Together AI.
Meta's model card: 70B text-in text-out, 128k context, GQA, 15T+ pretraining tokens with a December 2023 cutoff, over 25M synthetic fine-tuning examples, 7.0M H100 GPU hours and 12.9 tons CO2eq location-based, eight supported languages, and the instruction-tuned table against Llama 3.1 8B, 70B and 405B.[1]
Same-day report by Kyle Wiggers: Meta says it delivers the performance of Llama 3.1 405B at lower cost, Ahmad Al-Dahle's chart against Gemini 1.5 Pro, GPT-4o and Nova Pro, the 700-million-user licence clause, more than 650 million Llama downloads, Meta AI near 600 million monthly users, and Llama 4 needing 10x the compute.[1]
빠지거나 잘못된 점이 있나요? 이 핀을 뒷받침하는 링크, 다른 시작일이나 종료일과 그 이유, 빠지거나 잘못된 사실을 자신의 말로 알려주세요. AI가 이 핀의 출처와 대조하고 더 나은 자료를 찾아, 뒷받침하는 페이지를 추가합니다. 핀 자체의 출처가 여전히 가장 중요하게 반영됩니다. AI는 이미지도 확인합니다. 다른 것을 보여주거나 제대로 보여주지 못하는 이미지는 뒤로 옮기거나 교체합니다.
원본 제목: Llama 3.3 70B Released
| 벤치마크 | Llama 3.1 8B | Llama 3.1 70B | Llama 3.3 70B | Llama 3.1 405B |
|---|---|---|---|---|
| MMLU (CoT, 0-shot) | 73.0 | 86.0 | 86.0 | 88.6 |
| MMLU Pro (CoT, 5-shot) | 48.3 | 66.4 | 68.9 | 73.3 |
| IFEval | 80.4 | 87.5 | 92.1 | 88.6 |
| GPQA Diamond (CoT) | 31.8 | 48.0 | 50.5 | 49.0 |
| HumanEval (pass@1) | 72.6 | 80.5 | 88.4 | 89.0 |
| MBPP EvalPlus (base) | 72.8 | 86.0 | 87.6 | 88.6 |
| MATH (CoT) | 51.9 | 68.0 | 77.0 | 73.8 |
| BFCL v2 | 65.4 | 77.5 | 77.3 | 81.1 |
| MGSM | 68.9 | 86.9 | 91.1 | 91.6 |