Запись Google 'Introducing Gemma 3: The most capable model you can run on a single GPU or TPU' и руководство в блоге для разработчиков датированы 12 марта 2025 года и сообщают, что Gemma 3 доступна в тот же день.[1]
- Начало
- 12 мар. 2025 г.ДОСТОВЕРНОСТЬ 90%источник
Выпущены Gemma 3 4B, 12B, 27B и 1B
Автоматический перевод оригинала
Оригинальное название: Gemma 3 4B, 12B, 27B and 1B Released
Google выпускает Gemma 3 — открытые модели размеров 1B, 4B, 12B и 27B с поддержкой изображений, контекстным окном 128K и поддержкой 140 языков; 27B набирает 1338 на LMArena, а 4B позиционируется как конкурент Gemma 2 27B.
- Google выпустила Gemma 3 12 марта 2025 года в четырёх размерах — 1B, 4B, 12B и 27B, каждый в виде предобученной и дообученной на инструкциях модели, назвав её самой мощной моделью, которую можно запустить на одном GPU или TPU[1][5]
- Он наследует Gemma 2 от июня 2024 года и добавляет поддержку изображений во всех размерах, кроме 1B, контекст в 128K токенов (32K у 1B) и предобученную поддержку более 140 языков, из которых более 35 работают сразу; 1B стоит особняком: это модель только для текста и только на английском[1][3][5]
- Главное заявление Google — 1338 баллов на LMArena у модели 27B, что выше Llama 3.1 405B, DeepSeek-V3 и o3-mini в предварительных результатах оценки человеческих предпочтений; в техническом отчёте добавлено, что модель 4B instruct конкурирует с Gemma 2 27B[1][4][6]
- Модель 4B — небольшая мультимодальная рабочая лошадка: она набирает 43.6 на MMLU-Pro, 75.6 на MATH и 70.1 на FACTS Grounding против 46.8, 49.4 и 62.0 у Gemma 2 9B, так что прирост — в математике и достоверности, а не в общих знаниях[4]
- Цены на хостинге крошечные: OpenRouter указывает для 4B $0.05 за 1 миллион входных токенов и $0.10 за 1 миллион выходных токенов[2]
Ключевые возможности
- Мультимодальный ввод: изображения кодируются визуальным энкодером SigLIP, общим для 4B, 12B и 27B и рассчитанным на изображения 896x896, с адаптивным окном для изображений высокого разрешения и неквадратных картинок[5]
- Обучены на 2T, 4T, 12T и 14T токенов для 1B, 4B, 12B и 27B на TPU Google с использованием JAX; пост-обучение включает дистилляцию, RLHF и обратную связь по математике (RLMF) и выполнению кода (RLEF)[5]
- Вызов функций и структурированный вывод, официальные квантованные версии и доступность через Google AI Studio, Hugging Face, Kaggle, Ollama, Vertex AI и Cloud Run[1][5]
- Вместе с ней вышла ShieldGemma 2 — проверка безопасности изображений на 4B, построенная на Gemma 3, а архитектура увеличивает долю слоёв локального внимания относительно глобального, чтобы снизить расход памяти при длинном контексте[1][4]
- Веса можно бесплатно скачать с Hugging Face и Kaggle, хотя Википедия относит Gemma к моделям с доступным исходным кодом (source-available), а не к открытым[1][3]
Бенчмарки[4]
| Бенчмарк | Gemma 2 2B | Gemma 2 9B | Gemma 2 27B | Gemma 3 1B | Gemma 3 4B | Gemma 3 12B | Gemma 3 27B |
|---|---|---|---|---|---|---|---|
| MMLU-Pro | 15.6 | 46.8 | 56.9 | 14.7 | 43.6 | 60.6 | 67.5 |
| LiveCodeBench | 1.2 | 10.8 | 20.4 | 1.9 | 12.6 | 24.6 | 29.7 |
| Bird-SQL (dev) | 12.2 | 33.8 | 46.7 | 6.4 | 36.3 | 47.9 | 54.4 |
| GPQA Diamond | 24.7 | 28.8 | 34.3 | 19.2 | 30.8 | 40.9 | 42.4 |
| SimpleQA | 2.8 | 5.3 | 9.2 | 2.2 | 4.0 | 6.3 | 10.0 |
| FACTS Grounding | 43.8 | 62.0 | 62.4 | 36.4 | 70.1 | 75.8 | 74.9 |
| Global MMLU-Lite | 41.9 | 64.8 | 68.6 | 34.2 | 54.5 | 69.5 | 75.1 |
| MATH | 27.2 | 49.4 | 55.6 | 48.0 | 75.6 | 83.8 | 89.0 |
| HiddenMath | 1.8 | 10.4 | 14.8 | 15.8 | 43.0 | 54.5 | 60.3 |
| MMMU (val) | - | - | - | - | 48.8 | 59.6 | 64.9 |
Купить вGemini