Phi-4-multimodal-instruct

мультимодальная
русскоязычная

Phi-4-multimodal-instruct — это мультимодальная модель с открытым исходным кодом от Microsoft, обрабатывающая текст, изображения и аудио в едином архитектурном решении. Она построена на основе технологий Phi-3.5 и Phi-4.0, с расширенным контекстным окном в 128K токенов и поддержкой 23 языков для текста (в том числе русский), 8 языков для аудио и английского для визуальных задач. Модель оптимизирована для сред с ограниченными вычислительными ресурсами и сценариев с низкой задержкой, демонстрируя сильные результаты в математике, логике, распознавании речи, переводе и анализе изображений.

Единая нейросеть обрабатывает текст, изображения (OCR, таблицы, диаграммы) и аудио (распознавание, перевод, суммаризация). Например, в тестах DocVQA модель достигает 93.2% точности, превосходя Gemini-2.0-Flash (92.1%)

Модель идеально подходит для мультисенсорных приложений - совместная обработка аудио и изображений (например, анализ видео с субтитрами). При этом, благодаря оптимизации через Microsoft Olive и ONNX GenAI Runtime, модель может развертываться на edge-устройствах, включая смартфоны и IoT-системы, даже с ограниченными вычислительными ресурсами.


Дата анонса: 27.02.2025
Параметров: 6B
Контекст: 132K
Слоев: 32
Тип внимания: Full Attention
Разработчик: Microsoft
Версия Transformers: 4.46.1
Лицензия: MIT

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с Phi-4-multimodal-instruct. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка
Для данной модели пока нет публичных эндпоинтов.

Частный сервер

Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.

Мы рекомендуем создание частных инстансов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве,
  • использовать кастомизированные веса: fine-tuned версии или lora-адаптеры.

Рекомендуемые конфигурации сервера для хостинга Phi-4-multimodal-instruct

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslat4-2.16.32.160
131 072
tensor
2 48,14 ₽ 1,10 Запустить
teslaa2-2.16.32.160
131 072
tensor
2 51,34 ₽ 1,10 Запустить
rtx2080ti-3.12.24.120
131 072
pipeline
3 74,84 ₽ 1,04 Запустить
teslaa10-2.16.64.160
131 072
tensor
2 83,37 ₽ 2,01 Запустить
rtx2080ti-4.16.32.160
131 072
tensor
4 99,74 ₽ 1,44 Запустить
rtxa5000-2.16.64.160.nvlink
131 072
tensor
2 109,77 ₽ 2,01 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 2,13 Запустить
rtx5090-1.16.64.160
131 072
1 141,77 ₽ 1,43 Запустить
rtx3080-4.16.64.160
131 072
tensor
4 162,57 ₽ 1,22 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 2,13 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 4,19 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 4,18 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 4,98 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 8,54 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 7,67 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 15,50 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslat4-3.32.64.160
131 072
pipeline
3 78,57 ₽ 1,56 Запустить
teslaa10-2.16.64.160
131 072
tensor
2 83,37 ₽ 1,85 Запустить
teslat4-4.16.64.160
131 072
tensor
4 85,77 ₽ 2,20 Запустить
teslaa2-3.32.128.160
131 072
pipeline
3 94,64 ₽ 1,57 Запустить
rtx2080ti-4.16.32.160
131 072
tensor
4 99,74 ₽ 1,28 Запустить
rtxa5000-2.16.64.160.nvlink
131 072
tensor
2 109,77 ₽ 1,85 Запустить
teslaa2-4.32.128.160
131 072
tensor
4 112,24 ₽ 2,21 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 1,97 Запустить
rtx5090-1.16.64.160
131 072
1 141,77 ₽ 1,27 Запустить
rtx3080-4.16.64.160
131 072
tensor
4 162,57 ₽ 1,06 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 1,97 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 4,03 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 4,02 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 4,82 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 8,38 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 7,51 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 15,34 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslat4-3.32.64.160
131 072
pipeline
3 78,57 ₽ 1,12 Запустить
teslaa10-2.16.64.160
131 072
tensor
2 83,37 ₽ 1,43 Запустить
teslat4-4.16.64.160
131 072
tensor
4 85,77 ₽ 1,78 Запустить
teslaa2-3.32.128.160
131 072
pipeline
3 94,64 ₽ 1,13 Запустить
rtxa5000-2.16.64.160.nvlink
131 072
tensor
2 109,77 ₽ 1,43 Запустить
teslaa2-4.32.128.160
131 072
tensor
4 112,24 ₽ 1,79 Запустить
rtx3090-2.16.64.160
131 072
tensor
2 139,77 ₽ 1,55 Запустить
rtx4090-2.16.64.160
131 072
tensor
2 171,77 ₽ 1,55 Запустить
teslaa100-1.16.64.160
131 072
1 211,77 ₽ 3,60 Запустить
rtx5090-2.16.64.160
131 072
tensor
2 261,77 ₽ 2,45 Запустить
h100-1.16.64.160
131 072
1 341,77 ₽ 3,60 Запустить
h100nvl-1.16.96.160
131 072
1 367,41 ₽ 4,40 Запустить
teslaa100-2.24.96.160.nvlink
131 072
tensor
2 411,81 ₽ 7,96 Запустить
h200-1.16.128.160
131 072
1 423,04 ₽ 7,09 Запустить
h200-2.24.256.160.nvlink
131 072
tensor
2 839,97 ₽ 14,92 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям nn@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.