Qwen2-72B

русскоязычная

Qwen2-72B — флагманская модель серии с 72 миллиардами параметров, архитектура которой включает 80 слоёв со скрытым размером 8192 и реализует механизм Grouped Query Attention с 64 головами запросов и 8 общими головами ключ-значение, что в сочетании с технологиями Dual Chunk Attention и YARN обеспечивает максимальную производительность при обработке длинных контекстов и эффективное управление KV-кэшем.

Модель обучена на высококачественном датасете объемом 7 триллионов токенов с максимальным разнообразием данных. Базовая версия модели демонстрирует выдающиеся результаты на ключевых бенчмарках: 84.2 на MMLU, 37.9 на GPQA, 64.6 на HumanEval, 89.5 на GSM8K, и 82.4 на BBH1. Инструктированная версия Qwen2-72B-Instruct достигает 9.1 на MT-Bench, 48.1 на Arena-Hard, и 35.7 на LiveCodeBench, что ставит ее в один ряд с ведущими проприетарными моделями.

Qwen2-72B обладает исключительными способностями к сложным рассуждениям, пошаговому решению задач, продвинутому программированию и глубокому пониманию контекста. Многоязычные возможности модели позволяют ей работать на профессиональном уровне более чем с 30 языками включая русский. Соответственно она предназначена для самых требовательных к эффективности ИИ кейсов: научные исследования высокого уровня, сложная разработка программного обеспечения, создание высококачественного профессионального контента, продвинутый анализ данных, автоматизация сложных бизнес-процессов и создание интеллектуальных систем принятия решений.


Дата анонса: 24.07.2024
Параметров: 72B
Контекст: 33K
Слоев: 80
Тип внимания: Full Attention
Разработчик: Qwen
Версия Transformers: 4.40.1
Лицензия: Tongyi-Qianwen

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с Qwen2-72B. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка
Для данной модели пока нет публичных эндпоинтов.

Частный сервер

Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.

Мы рекомендуем создание частных инстансов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве,
  • использовать кастомизированные веса: fine-tuned версии или lora-адаптеры.

Рекомендуемые конфигурации сервера для хостинга Qwen2-72B

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslat4-4.16.64.160
32 768
tensor
4 85,77 ₽ 1,41 Запустить
teslaa2-4.32.128.160
32 768
tensor
4 112,24 ₽ 1,41 Запустить
teslaa10-3.16.96.160
32 768
pipeline
3 119,81 ₽ 2,38 Запустить
teslaa10-4.12.48.160
32 768
tensor
4 139,96 ₽ 4,29 Запустить
teslav100-2.16.64.240
32 768
tensor
2 198,54 ₽ 1,91 Запустить
rtx3090-3.16.96.160
32 768
pipeline
3 204,41 ₽ 2,38 Запустить
rtxa5000-4.16.128.160.nvlink
32 768
tensor
4 209,04 ₽ 4,29 Запустить
teslaa100-1.16.64.160
32 768
1 211,77 ₽ 3,60 Запустить
rtx4090-3.16.96.160
32 768
pipeline
3 252,41 ₽ 2,38 Запустить
rtx3090-4.16.64.160
32 768
tensor
4 257,77 ₽ 4,29 Запустить
rtx5090-2.16.64.160
32 768
tensor
2 261,77 ₽ 1,91 Запустить
rtx4090-4.16.64.160
32 768
tensor
4 321,77 ₽ 4,29 Запустить
h100-1.16.64.160
32 768
1 341,77 ₽ 3,60 Запустить
h100nvl-1.16.96.160
32 768
1 367,41 ₽ 4,86 Запустить
h200-1.16.128.160
32 768
1 423,04 ₽ 9,09 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
rtxa5000-6.24.192.160.nvlink
32 768
pipeline
6 312,70 ₽ 4,75 Запустить
teslav100-3.64.256.320
32 768
pipeline
3 347,52 ₽ 1,18 Запустить
h100nvl-1.16.96.160
32 768
1 367,41 ₽ 1,50 Запустить
rtx5090-3.16.96.160
32 768
pipeline
3 387,41 ₽ 1,18 Запустить
teslav100-4.32.96.160
32 768
tensor
4 388,21 ₽ 3,81 Запустить
teslaa100-2.24.96.160.nvlink
32 768
tensor
2 411,81 ₽ 7,19 Запустить
rtxa5000-8.24.256.160.nvlink
32 768
tensor
8 411,97 ₽ 8,57 Запустить
h200-1.16.128.160
32 768
1 423,04 ₽ 5,73 Запустить
rtx5090-4.16.128.160
32 768
tensor
4 513,04 ₽ 3,81 Запустить
rtx4090-6.44.256.160
32 768
pipeline
6 520,97 ₽ 4,75 Запустить
rtx4090-8.44.256.160
32 768
tensor
8 670,97 ₽ 8,57 Запустить
h100-2.24.256.160
32 768
tensor
2 699,97 ₽ 7,19 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa100-3.32.384.240
32 768
pipeline
3 657,66 ₽ 6,30 Запустить
h100nvl-2.24.192.240
32 768
tensor
2 729,47 ₽ 1,87 Запустить
rtx5090-6.44.256.240
32 768
pipeline
6 791,74 ₽ 1,23 Запустить
teslaa100-4.16.256.240
32 768
tensor
4 816,34 ₽ 13,25 Запустить
h200-2.24.256.240
32 768
tensor
2 840,74 ₽ 10,33 Запустить
rtx5090-8.44.256.240
32 768
tensor
8 1 031,74 ₽ 6,49 Запустить
h100-3.32.384.240
32 768
pipeline
3 1 047,66 ₽ 6,30 Запустить
h100-4.16.256.240
32 768
tensor
4 1 336,34 ₽ 13,25 Запустить

Связанные модели

QwQ

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям nn@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.