granite-4.2-3b

размышляющая

Granite-4.2-3B — самая компактная модель семейства, ориентированная на сценарии с жёсткими ограничениями по вычислительным ресурсам, но при этом сохраняющая ключевую особенность поколения 4.2 — встроенное рассуждение. Архитектура: плотный трансформер с 3 млрд параметров, 40 слоями, 40 головами запросов и 8 KV-головами, скрытым размером MLP 8192. Модель использует ту же схему GQA с полным вниманием в пределах контекста в 128К токенов, RoPE, SwiGLU и RMSNorm. Полное внимание здесь особенно важно, поскольку позволяет даже компактной модели выстраивать логические связи по всей заявленной длине входных данных.

3B поддерживает три режима мышления — full, non-thinking и low-effort — и нативный вызов инструментов, что делает её пригодной для лёгких агентных сценариев и диалоговых интерфейсов. Однако, в отличие от 8B и 30B, она не проходит агентный RL-блок (SWE, терминал, поиск) и довольствуется базовым RLVR для кода и instruction following. Это не недостаток, а осознанный выбор: 3B предназначена для случаев, где не требуется автономное решение сложных инженерных задач, но нужна надёжная рассуждающая модель, которую можно запустить на периферийном устройстве или в среде с ограниченной памятью.

Среди бенчмарков выделяются AIME25 (78.33) — для модели такого размера это очень высокий результат. MMLU-Pro (67.84) отражает широкие знания и способность следовать инструкциям на уровне, сопоставимом с моделями большего размера, что важно для универсального ассистента. RULER 128K (55.30) показывает, что модель справляется с длинным контекстом, хотя это не высокий, но приемлемый результат, позволяющий использовать её в задачах суммаризации и вопросно-ответных системах, исследующих документы средней длинны.

Granite-4.2-3B лучше всего подходит для edge-развёртывания, встраиваемых ассистентов, суммаризации документов, подсказок по автозаполнению кода/текста и других несложных задач в средах с ограниченной памятью. Все модели распространяются под лицензией Apache 2.0, что снимает вопросы по возможности коммерческого использования.


Дата анонса: 07.08.2026
Параметров: 4B
Контекст: 132K
Слоев: 40
Тип внимания: Full Attention
Разработчик: IBM
Версия Transformers: 4.57.1
Версия vLLM: >=0.17.0
Лицензия: Apache 2.0

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с granite-4.2-3b. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка

API доступ к granite-4.2-3b эндпоинтам

Для данной модели пока нет публичных эндпоинтов.

Частный эндпоинт

Эндпоинт — это сервер с предустановленным программным обеспечением, с помощью которого автоматически скачиваются веса нейросети и запускается OpenAI-совместимый API для обращений к серверу.

Частный эндпоинт создается в проекте пользователя, принадлежит пользователю монопольно и тарифицируется за каждую конфигурацию сервера в соответствии с нашими инфраструктурными тарифами.

Мы рекомендуем создание частных эндпоинтов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве.

Рекомендуемые конфигурации сервера для создания частного эндпоинта для инференса granite-4.2-3b

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
131 072
1 46,94 ₽ 1,96 Запустить
teslaa2-2.16.32.160
131 072
tensor
2 51,34 ₽ 2,32 Запустить
rtx3090-1.16.24.160
131 072
1 73,73 ₽ 2,09 Запустить
rtx3080-2.16.32.160
131 072
tensor
2 86,54 ₽ 1,10 Запустить
rtx4090-1.16.32.160
131 072
1 91,14 ₽ 2,08 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 4,52 Запустить
rtx5090-1.16.64.160
131 072
1 141,77 ₽ 3,04 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 8,92 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 8,91 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 10,62 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 18,18 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 16,35 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 33,04 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
131 072
1 46,94 ₽ 1,79 Запустить
teslaa2-2.16.32.160
131 072
tensor
2 51,34 ₽ 2,15 Запустить
rtx3090-1.16.24.160
131 072
1 73,73 ₽ 1,92 Запустить
rtx4090-1.16.32.160
131 072
1 91,14 ₽ 1,91 Запустить
rtx3080-3.16.64.160
131 072
pipeline
3 127,37 ₽ 1,55 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 4,35 Запустить
rtx5090-1.16.64.160
131 072
1 141,77 ₽ 2,87 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 8,75 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 8,74 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 10,44 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 18,01 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 16,17 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 32,87 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
131 072
1 46,94 ₽ 1,40 Запустить
teslaa2-2.16.32.160
131 072
tensor
2 51,34 ₽ 1,76 Запустить
rtx3090-1.16.24.160
131 072
1 73,73 ₽ 1,53 Запустить
rtx4090-1.16.32.160
131 072
1 91,14 ₽ 1,52 Запустить
rtx3080-3.16.64.160
131 072
pipeline
3 127,37 ₽ 1,16 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 3,96 Запустить
rtx5090-1.16.64.160
131 072
1 141,77 ₽ 2,48 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 8,36 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 8,35 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 10,05 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 17,62 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 15,78 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 32,48 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям support@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.

Мы используем файлы cookie и сервисы веб-аналитики для обеспечения работы сайта, анализа посещаемости и улучшения качества наших услуг.
Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности и даете согласие на обработку cookie-файлов и технических данных.