- Bắt đầu
- 20 thg 6, 2024ĐỘ TIN CẬY 92%từ techcrunch.com
Claude 3.5 Sonnet ra mắt
Được dịch tự động từ bản gốc
Tiêu đề gốc: Claude 3.5 Sonnet Released
- “Hôm nay, chúng tôi ra mắt Claude 3.5 Sonnet—bản phát hành đầu tiên trong họ mô hình Claude 3.5 sắp tới”, vượt Claude 3 Opus “với tốc độ và chi phí của mô hình tầm trung của chúng tôi, Claude 3 Sonnet”[1][4]
- Miễn phí trên Claude.ai và ứng dụng Claude iOS, với giới hạn tốc độ cao hơn cho người đăng ký Pro và Team, và có sẵn ngay trong ngày trên Anthropic API, Amazon Bedrock và Vertex AI của Google Cloud[1][5]
- Mô hình ra mắt cùng Artifacts, một cửa sổ bên cạnh cuộc trò chuyện nơi mã, tài liệu và thiết kế trang web xuất hiện để người dùng xem, chỉnh sửa và phát triển tiếp theo thời gian thực[1][3]
- Mô hình vẫn ở mức ASL-2; Anthropic đã đưa nó cho Viện An toàn AI Vương quốc Anh để thử nghiệm trước triển khai, và viện này đã chia sẻ kết quả với Viện An toàn AI Hoa Kỳ[1]
- Anthropic nói sẽ hoàn thiện họ mô hình với Claude 3.5 Haiku và Claude 3.5 Opus vào cuối năm 2024[1]
Tính năng nổi bật
- Có giá 3 đô la cho mỗi triệu token đầu vào và 15 đô la cho mỗi triệu token đầu ra, với cửa sổ ngữ cảnh 200K token; AWS gọi nó là rẻ hơn 80 phần trăm so với Claude 3 Opus[1][5]
- Chạy với tốc độ gấp đôi Claude 3 Opus[1][4]
- Thẻ mô hình của Anthropic: 59.4% trên GPQA Diamond, 88.7% trên MMLU, 92.0% trên HumanEval và 71.1% trên MATH, so với 50.4%, 86.8%, 84.9% và 60.1% của Claude 3 Opus[2]
- Mô hình giải được 64% số bài trong một đánh giá lập trình kiểu tác tử nội bộ - sửa lỗi hoặc thêm tính năng cho một cơ sở mã nguồn mở - so với 38% của Claude 3 Opus[1][2]
- Mô hình thị giác mạnh nhất của Anthropic từ trước đến nay: đọc biểu đồ và đồ thị tốt hơn và chép lại văn bản từ những hình ảnh không hoàn hảo, đạt 68.3% trên MMMU[1][2]
Điểm chuẩn[1]
| Chuẩn đánh giá | Claude 3.5 Sonnet | Claude 3 Opus | GPT-4o | Gemini 1.5 Pro | Llama-400b (bản chụp sớm) |
|---|---|---|---|---|---|
| Suy luận trình độ sau đại học (GPQA, Diamond) | 59.4%* (0-shot CoT) | 50.4% (0-shot CoT) | 53.6% (0-shot CoT) | — | — |
| Kiến thức trình độ đại học (MMLU), 5-shot | 88.7%** (5-shot) | 86.8% (5-shot) | — | 85.9% (5-shot) | 86.1% (5-shot) |
| Kiến thức trình độ đại học (MMLU), 0-shot CoT | 88.3% (0-shot CoT) | 85.7% (0-shot CoT) | 88.7% (0-shot CoT) | — | — |
| Mã (HumanEval) | 92.0% (0-shot) | 84.9% (0-shot) | 90.2% (0-shot) | 84.1% (0-shot) | 84.1% (0-shot) |
| Toán đa ngôn ngữ (MGSM) | 91.6% (0-shot CoT) | 90.7% (0-shot CoT) | 90.5% (0-shot CoT) | 87.5% (8-shot) | — |
| Suy luận trên văn bản (DROP, điểm F1) | 87.1 (3-shot) | 83.1 (3-shot) | 83.4 (3-shot) | 74.9 (số shot thay đổi) | 83.5 (3-shot, mô hình huấn luyện trước) |
| Đánh giá hỗn hợp (BIG-Bench-Hard) | 93.1% (3-shot CoT) | 86.8% (3-shot CoT) | — | 89.2% (3-shot CoT) | 85.3% (3-shot CoT, mô hình huấn luyện trước) |
| Giải toán (MATH) | 71.1% (0-shot CoT) | 60.1% (0-shot CoT) | 76.6% (0-shot CoT) | 67.7% (4-shot) | 57.8% (4-shot CoT) |
| Toán tiểu học (GSM8K) | 96.4% (0-shot CoT) | 95.0% (0-shot CoT) | — | 90.8% (11-shot) | 94.1% (8-shot CoT) |
* Claude 3.5 Sonnet đạt 67.2% trên GPQA 5-shot CoT với maj@32. ** Claude 3.5 Sonnet đạt 90.4% trên MMLU với lời nhắc 5-shot CoT.
Tài liệu tham khảo 5ĐỘ TIN CẬY 85%Độ tin cậy tổng thể: 85%Mức độ nguồn và tài liệu tham khảo của ghim củng cố các ngày của nó.Trung bình có trọng số về mức độ 5 tài liệu, gồm cả nguồn, ủng hộ thời điểm bắt đầu và kết thúc của ghim; một tài liệu được tính giảm một nửa cho mỗi 180 ngày cũ hơn tài liệu mới nhấtHiện tất cả ghim có độ tin cậy từ 75% trở lên
Mục đầu tiên luôn là nguồn của ghim. Độ tin cậy tổng thể là trung bình có trọng số về mức độ mỗi tài liệu ủng hộ thời điểm bắt đầu và kết thúc được dùng ở trên; một tài liệu được tính giảm một nửa cho mỗi 180 ngày cũ hơn tài liệu mới nhất.
- [1]90%anthropic.com/news/claude-3-5-sonnetanthropic.com· Đăng 28 thg 9, 2026· Bắt đầu 20 thg 6, 2024· 32% điểm số
Anthropic[2]: “Hôm nay, chúng tôi ra mắt Claude 3.5 Sonnet” và mô hình “hiện có miễn phí trên Claude.ai”; phần đầu trang hiện nay ghi ngày Jun 21, 2024, nhưng TechCrunch[4] và AWS đều đăng về đợt ra mắt vào ngày 20 tháng 6 năm 2024 và mã mô hình là claude-3-5-sonnet-20240620.
- [2]90%Claude 3.5 Sonnet Model Card Addendumwww-cdn.anthropic.com· Thêm 28 thg 9, 2026· 32% điểm số
Anthropic's[1] model card addendum: 59.4% on GPQA Diamond, 88.7% on MMLU (5-shot), 92.0% on HumanEval, 71.1% on MATH and 68.3% on MMMU, against Claude 3 Opus's 50.4%, 86.8%, 84.9%, 60.1% and 59.4%; 64% on the internal agentic coding evaluation against Opus's 38%.
- [3]75%Claude (AI) - Wikipediaen.wikipedia.org· Thêm 28 thg 9, 2026· 32% điểm số
"On June 20, 2024, Anthropic[1][2] released Claude 3.5 Sonnet, which, according to the company's own benchmarks, performed better than the larger Claude 3 Opus", alongside Artifacts, which previews code, SVG graphics or websites in a separate window.
- [4]92%Anthropic claims its latest model is best-in-classtechcrunch.com· Xuất bản 20 thg 6, 2024· Bắt đầu 20 thg 6, 2024 ✓· 1% điểm số
TechCrunch, published 2024-06-20T14:00Z: Anthropic[1][2] "is releasing a powerful new generative AI model called Claude 3.5 Sonnet", about twice the speed of Claude 3 Opus, alongside Artifacts. It dates the launch 20 June, where Anthropic's own header now shows the 21 June UTC timestamp.
- [5]90%Anthropic's Claude 3.5 Sonnet model now available in Amazon Bedrock: Even more intelligence than Claude 3 Opus at one-fifth the costaws.amazon.com· Xuất bản 20 thg 6, 2024· Bắt đầu 20 thg 6, 2024· 1% điểm số
AWS News Blog, 20 JUN 2024: "Today, Anthropic[1][2] introduced Claude 3.5 Sonnet ... now available in Amazon Bedrock"; 80 percent cheaper than Opus and about 10 percent better than Claude 3 Opus on most vision benchmarks.
Đề xuất chỉnh sửa
Thiếu hay sai điều gì? Hãy nói bằng lời của bạn: một liên kết củng cố ghim này, một ngày bắt đầu hoặc kết thúc khác kèm lý do, hoặc một thông tin còn thiếu hay sai. AI đối chiếu với các nguồn của ghim này, tìm nguồn tốt hơn và thêm mọi trang ủng hộ bạn. Các nguồn của chính ghim vẫn được tính nhiều nhất. Hình ảnh thể hiện nội dung khác hoặc thể hiện kém cũng được xem xét, rồi bị hạ xuống hoặc thay thế.
