Phi-4

Phi-4 — это современная открытая языковая модель с 14 миллиардами параметров. Несмотря на то, что архитектурные изменения по сравнению с предыдущими версиями минимальны, модель демонстрирует значительный прогресс в задачах, требующих логического мышления и аналитики, что стало возможным благодаря инновационному подходу к обучению. В отличие от традиционных методов обучения языковых моделей, в Phi-4 ключевой акцент сделан не на объёме данных, а на их качестве. Обучение Phi-4 проводилось на основе разнообразных источников, включая синтетические данные, специально созданные для развития навыков рассуждения, отфильтрованные документы из публичных источников, а также приобретённые академические книги и вопросно-ответные базы знаний. Это позволяет модели достигать высокой производительности даже при относительно небольшом размере.

Phi-4 работает только с текстовыми данными. Контекст относительно небольшой 16К токенов, но поддерживается работа более чем на 50 языках, включая русский.

В целом Phi-4 достаточно разноплановая легковесная модель, но по словам разработчиков особенно эффективна она в среде с ограниченным объемом памяти и вычислительных ресурсов, а также для задач, требующих моментального отклика.


Дата анонса: 12.12.2024
Параметров: 15B
Контекст: 17K
Слоев: 40
Тип внимания: Full Attention
Разработчик: Microsoft
Версия Transformers: 4.47.0
Лицензия: MIT

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с Phi-4. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка
Для данной модели пока нет публичных эндпоинтов.

Частный сервер

Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.

Мы рекомендуем создание частных инстансов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве,
  • использовать кастомизированные веса: fine-tuned версии или lora-адаптеры.

Рекомендуемые конфигурации сервера для хостинга Phi-4

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
16 384
1 46,94 ₽ 32.82 2,75 Запустить
teslaa2-2.16.32.160
16 384
tensor
2 51,34 ₽ 9.15 4,46 Запустить
rtx3090-1.16.24.160
16 384
1 73,73 ₽ 50.09 3,06 Запустить
rtx4090-1.16.32.160
16 384
1 91,14 ₽ 69.85 3,05 Запустить
rtx3080-3.16.64.160
16 384
pipeline
3 127,37 ₽ 2,63 Запустить
rtx3090-2.16.64.160.nvlink
16 384
tensor
2 139,77 ₽ 9,07 Запустить
rtx5090-1.16.64.160
16 384
1 141,77 ₽ 83.03 5,36 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 53.63 19,46 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 63.45 19,27 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 91.22 23,36 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 41,86 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 37,11 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 77,51 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
16 384
1 46,94 ₽ 1,45 Запустить
teslaa2-2.16.32.160
16 384
tensor
2 51,34 ₽ 3,28 Запустить
rtx3090-1.16.24.160
16 384
1 73,73 ₽ 50.17 1,91 Запустить
rtx4090-1.16.32.160
16 384
1 91,14 ₽ 43.48 1,67 Запустить
rtx3080-3.16.64.160
16 384
pipeline
3 127,37 ₽ 43.33 2,53 Запустить
rtx3090-2.16.64.160.nvlink
16 384
tensor
2 139,77 ₽ 8,56 Запустить
rtx5090-1.16.64.160
16 384
1 141,77 ₽ 4,21 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 80.23 18,14 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 96.69 18,04 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 143.66 22,13 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 41,35 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 36,13 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 77,01 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-2.16.64.160
16 384
tensor
2 83,37 ₽ 29.00 3,29 Запустить
teslaa2-3.32.128.160
16 384
pipeline
3 94,64 ₽ 5.77 2,05 Запустить
rtx3090-2.16.64.160
16 384
tensor
2 139,77 ₽ 46.56 4,14 Запустить
rtx3090-2.16.64.160.nvlink
16 384
tensor
2 139,77 ₽ 4,14 Запустить
rtx4090-2.16.64.160
16 384
tensor
2 171,77 ₽ 55.00 4,06 Запустить
teslaa100-1.16.64.160
16 384
1 211,77 ₽ 46.21 13,98 Запустить
rtx5090-2.16.64.160
16 384
tensor
2 261,77 ₽ 73.39 8,47 Запустить
h100-1.16.64.160
16 384
1 341,77 ₽ 53.09 13,80 Запустить
h100nvl-1.16.96.160
16 384
1 367,41 ₽ 87.21 17,14 Запустить
teslaa100-2.24.96.160.nvlink
16 384
tensor
2 411,81 ₽ 36,87 Запустить
h200-1.16.128.160
16 384
1 423,04 ₽ 31,88 Запустить
h200-2.24.256.160.nvlink
16 384
tensor
2 839,97 ₽ 72,52 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям support@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.

Мы используем файлы cookie и сервисы веб-аналитики для обеспечения работы сайта, анализа посещаемости и улучшения качества наших услуг.
Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности и даете согласие на обработку cookie-файлов и технических данных.