granite-4.2-8b

размышляющая
для кодинга

Granite-4.2-8B занимает среднюю позицию в семействе и предлагает компромисс между качеством рассуждений и вычислительной эффективностью. Это плотный decoder-only трансформер с 8 млрд параметров с 40 слоями, 32 головами запросов, 8 KV-головами и скрытым размером MLP 12 800. Архитектурные принципы: GQA с полным вниманием в пределах контекста, RoPE с θ = 10 000 000, SwiGLU, RMSNorm и bfloat16. Полное внимание здесь сохраняет способность модели выстраивать точные дальние зависимости, необходимые для агентных циклов и длинных документов, а GQA удерживает стоимость инференса в разумных рамках для модели среднего размера.

От Granite-4.1 модель отличается прежде всего добавлением нативного рассуждения и агентного RL. Как и 30B, модель поддерживает три режима мышления (full, non-thinking, low-effort) и нативный вызов инструментов с рассуждением при выборе функции. Модель при обучении прошла агентный RL-блок — те же этапы SWE, терминала и поиска, что и флагман, хотя и с меньшим числом раундов RLVR (2 против 3 у 30B). Это означает, что 8B способна не просто следовать инструкциям, а действовать в реальных средах: редактировать код, выполнять команды и вести многошаговый поиск. При этом модель остаётся достаточно компактной для развёртывания, что делает её практичным выбором для агентных систем среднего масштаба.

Из бенчмарков показательны SWE Bench Verified (47.67) — способность решать реальные задачи в репозиториях, AIME25 (86.67) демонстрирует сильные математические рассуждения- результат близок к флагману, даже при 8 млрд параметров. RULER 128K (71.41) подтверждает работоспособность на длинном контексте: модель сохраняет значительную точность на 128K контксте.

Granite-4.2-8B — универсальный производственный выбор для агентных систем среднего масштаба: вызов инструментов, автоматизация процесса разработки, многоязычные диалоги и задачи с контекстом приемлемой длинны, где важны одновременно и качество, и стоимость инференса.


Дата анонса: 07.08.2026
Параметров: 9B
Контекст: 132K
Слоев: 40
Тип внимания: Full Attention
Разработчик: IBM
Версия Transformers: 4.57.1
Версия vLLM: >=0.17.0
Лицензия: Apache 2.0

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с granite-4.2-8b. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка

API доступ к granite-4.2-8b эндпоинтам

Для данной модели пока нет публичных эндпоинтов.

Частный эндпоинт

Эндпоинт — это сервер с предустановленным программным обеспечением, с помощью которого автоматически скачиваются веса нейросети и запускается OpenAI-совместимый API для обращений к серверу.

Частный эндпоинт создается в проекте пользователя, принадлежит пользователю монопольно и тарифицируется за каждую конфигурацию сервера в соответствии с нашими инфраструктурными тарифами.

Мы рекомендуем создание частных эндпоинтов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве.

Рекомендуемые конфигурации сервера для создания частного эндпоинта для инференса granite-4.2-8b

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-2.16.64.160
131 072
tensor
2 83,37 ₽ 1,44 Запустить
teslaa2-3.32.128.160
131 072
pipeline
3 94,64 ₽ 1,14 Запустить
teslaa2-4.32.128.160
131 072
tensor
4 112,24 ₽ 1,72 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 1,54 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 1,54 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 1,54 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 3,19 Запустить
rtx5090-2.16.64.160
131 072
tensor
2 261,77 ₽ 2,26 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 3,19 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 3,83 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 6,66 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 5,97 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 12,23 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-2.16.64.160
131 072
tensor
2 83,37 ₽ 1,28 Запустить
teslaa2-4.32.128.160
131 072
tensor
4 112,24 ₽ 1,55 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 1,38 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 1,38 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 1,37 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 3,03 Запустить
rtx5090-2.16.64.160
131 072
tensor
2 261,77 ₽ 2,09 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 3,02 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 3,66 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 6,50 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 5,81 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 12,07 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa2-4.32.128.160
131 072
tensor
4 112,24 ₽ 1,18 Запустить
teslaa10-3.16.96.160
131 072
pipeline
3 119,81 ₽ 1,65 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 1,01 Запустить
rtx3090-2.16.64.160.nvlink
131 072
tensor
2 139,77 ₽ 1,01 Запустить
teslaa10-4.12.48.160
131 072
tensor
4 139,96 ₽ 2,64 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 1,00 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 2,66 Запустить
rtx5090-2.16.64.160
131 072
tensor
2 261,77 ₽ 1,72 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 2,65 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 3,29 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 6,13 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 5,44 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 11,70 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям support@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.

Мы используем файлы cookie и сервисы веб-аналитики для обеспечения работы сайта, анализа посещаемости и улучшения качества наших услуг.
Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности и даете согласие на обработку cookie-файлов и технических данных.