Phi-4

Phi-4 — это современная открытая языковая модель с 14 миллиардами параметров. Несмотря на то, что архитектурные изменения по сравнению с предыдущими версиями минимальны, модель демонстрирует значительный прогресс в задачах, требующих логического мышления и аналитики, что стало возможным благодаря инновационному подходу к обучению. В отличие от традиционных методов обучения языковых моделей, в Phi-4 ключевой акцент сделан не на объёме данных, а на их качестве. Обучение Phi-4 проводилось на основе разнообразных источников, включая синтетические данные, специально созданные для развития навыков рассуждения, отфильтрованные документы из публичных источников, а также приобретённые академические книги и вопросно-ответные базы знаний. Это позволяет модели достигать высокой производительности даже при относительно небольшом размере.

Phi-4 работает только с текстовыми данными. Контекст относительно небольшой 16К токенов, но поддерживается работа более чем на 50 языках, включая русский.

В целом Phi-4 достаточно разноплановая легковесная модель, но по словам разработчиков особенно эффективна она в среде с ограниченным объемом памяти и вычислительных ресурсов, а также для задач, требующих моментального отклика.


Дата анонса: 12.12.2024
Параметров: 15B
Контекст: 17K
Слоев: 40
Тип внимания: Full Attention
Разработчик: Microsoft
Версия Transformers: 4.47.0
Лицензия: MIT

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с Phi-4. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка
Для данной модели пока нет публичных эндпоинтов.

Частный сервер

Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.

Мы рекомендуем создание частных инстансов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве,
  • использовать кастомизированные веса: fine-tuned версии или lora-адаптеры.

Рекомендуемые конфигурации сервера для хостинга Phi-4

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
16 384
1 46,94 ₽ 32,10 2,47 Запустить
teslaa2-2.16.32.160
16 384
tensor
2 51,34 ₽ 9,15 3,39 Запустить
rtx3090-1.16.24.160
16 384
1 73,73 ₽ 2,78 Запустить
rtx4090-1.16.32.160
16 384
1 91,14 ₽ 2,77 Запустить
rtxa5000-2.16.64.160.nvlink
16 384
tensor
2 109,77 ₽ 8,04 Запустить
rtx3080-3.16.64.160
16 384
pipeline
3 127,37 ₽ 2,07 Запустить
rtx5090-1.16.64.160
16 384
1 141,77 ₽ 5,08 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 53,03 19,18 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 63,45 19,16 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 91,22 23,25 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 41,45 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 37,00 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 77,11 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa2-2.16.32.160
16 384
tensor
2 51,34 ₽ 1,81 Запустить
rtx3090-1.16.24.160
16 384
1 73,73 ₽ 1,20 Запустить
teslaa10-2.16.64.160
16 384
tensor
2 83,37 ₽ 6,46 Запустить
rtx4090-1.16.32.160
16 384
1 91,14 ₽ 1,19 Запустить
rtxa5000-2.16.64.160.nvlink
16 384
tensor
2 109,77 ₽ 6,46 Запустить
rtx5090-1.16.64.160
16 384
1 141,77 ₽ 3,50 Запустить
rtx3080-4.16.64.160
16 384
pipeline
4 162,57 ₽ 2,42 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 80,23 17,60 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 96,69 17,58 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 143,66 21,67 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 39,87 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 35,42 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 75,53 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-2.16.64.160
16 384
tensor
2 83,37 ₽ 29,00 2,40 Запустить
rtxa5000-2.16.64.160.nvlink
16 384
tensor
2 109,77 ₽ 2,40 Запустить
teslaa2-4.32.128.160
16 384
pipeline
4 112,24 ₽ 4,23 Запустить
rtx3090-2.16.64.160
16 384
tensor
2 139,77 ₽ 46,56 3,02 Запустить
rtx4090-2.16.64.160
16 384
tensor
2 171,77 ₽ 3,00 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 45,55 13,54 Запустить
rtx5090-2.16.64.160
16 384
tensor
2 261,77 ₽ 7,61 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 53,09 13,52 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 87,21 17,61 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 35,81 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 31,36 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 71,46 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям nn@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.

Мы используем файлы cookie и сервисы веб-аналитики для обеспечения работы сайта, анализа посещаемости и улучшения качества наших услуг.
Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности и даете согласие на обработку cookie-файлов и технических данных.