Qwen2.5-VL-7B-Instruct

мультимодальная
русскоязычная

Qwen2.5-VL-7B представляет собой оптимальный баланс между производительностью и вычислительными требованиями, устанавливая новые стандарты в качестве обработки мультимодальных данных. Революционная система MRoPE (Multimodal Rotary Position Embedding) с выравниванием по абсолютному времени позволяет модели изучать темпоральную динамику и скорость событий через интервалы между временными измерениями без дополнительных вычислительных затрат. Архитектурные инновации 7B модели включают усовершенствованный Vision Transformer с комбинацией полного внимания и window attention, где только 4 слоя используют полное внимание, а остальные применяют оконное внимание с максимальным размером окна 112×112. Это обеспечивает линейное масштабирование вычислительных затрат и позволяет модели нативно обрабатывать изображения любого разрешения. Динамическая обработка FPS для видео расширяет возможности модели на временное измерение, обеспечивая точную локализацию событий.

Производительность 7B модели впечатляет: 58.6% на MMMU, 95.7% на DocVQA, 84.9% на TextVQA и 68.2% на MathVista, что превосходит многие модели сопоставимого размера. В области агентских задач модель демонстрирует выдающиеся результаты: 84.7% на ScreenSpot, 81.9% на AITZ и 91.4% на MobileMiniWob++, подтверждая ее способность эффективно взаимодействовать с графическими интерфейсами. Особенно впечатляющими являются возможности видеопонимания, где модель достигает 69.6% на MVBench и 70.5% на PerceptionTest.

Сценарии применения модели охватывают профессиональные системы автоматизации документооборота, интеллектуальные системы видеонаблюдения с анализом поведения, образовательные платформы с интерактивным мультимедийным контентом и корпоративные решения для анализа больших объемов визуальных данных. Модель идеально подходит для развертывания в облачных сервисах, где требуется высокое качество обработки при разумных вычислительных затратах, а также для локальных серверов в средних и крупных организациях. Благодаря превосходным OCR возможностям, модель становится незаменимой для финтех-приложений, систем обработки счетов и автоматизации бухгалтерских процессов.


Дата анонса: 26.01.2025
Параметров: 9B
Контекст: 128K
Слоев: 28
Тип внимания: Full Attention
Разработчик: Qwen
Версия Transformers: 4.41.2
Лицензия: Apache 2.0

Публичный эндпоинт

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с Qwen2.5-VL-7B-Instruct. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.
Наименование модели Контекст Тип GPU Статус Ссылка

API доступ к Qwen2.5-VL-7B-Instruct эндпоинтам

Для данной модели пока нет публичных эндпоинтов.

Частный эндпоинт

Эндпоинт — это сервер с предустановленным программным обеспечением, с помощью которого автоматически скачиваются веса нейросети и запускается OpenAI-совместимый API для обращений к серверу.

Частный эндпоинт создается в проекте пользователя, принадлежит пользователю монопольно и тарифицируется за каждую конфигурацию сервера в соответствии с нашими инфраструктурными тарифами.

Мы рекомендуем создание частных эндпоинтов в случаях, если необходимо:

  • получить максимальную производительность эндпоинта,
  • получить полный контекст для обработки больших запросов и диалогов,
  • обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве.

Рекомендуемые конфигурации сервера для создания частного эндпоинта для инференса Qwen2.5-VL-7B-Instruct

Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
128 000
1 46,94 ₽ 82.61 1,93 Запустить
teslaa2-2.16.32.160
128 000
tensor
2 51,34 ₽ 2,70 Запустить
rtx3090-1.16.24.160
128 000
1 73,73 ₽ 161.67 2,07 Запустить
rtx3080-2.16.32.160
128 000
tensor
2 86,54 ₽ 141.17 1,33 Запустить
rtx4090-1.16.32.160
128 000
1 91,14 ₽ 2,05 Запустить
rtx3090-2.16.64.160.nvlink
128 000
tensor
2 139,77 ₽ 5,09 Запустить
rtx5090-1.16.64.160
128 000
1 141,77 ₽ 3,12 Запустить
teslaa100-1.16.64.160
128 000
1 211,77 ₽ 9,56 Запустить
h100-1.16.64.160
128 000
1 341,77 ₽ 182.50 9,55 Запустить
h100nvl-1.16.96.160
128 000
1 367,41 ₽ 11,43 Запустить
teslaa100-2.24.96.160.nvlink
128 000
tensor
2 411,81 ₽ 20,10 Запустить
h200-1.16.128.160
128 000
1 423,04 ₽ 17,71 Запустить
h200-2.24.256.160.nvlink
128 000
tensor
2 839,97 ₽ 36,40 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa10-1.16.32.160
128 000
1 46,94 ₽ 54.01 1,50 Запустить
teslaa2-2.16.32.160
128 000
tensor
2 51,34 ₽ 39.06 2,29 Запустить
rtx3090-1.16.24.160
128 000
1 73,73 ₽ 101.90 1,65 Запустить
rtx4090-1.16.32.160
128 000
1 91,14 ₽ 118.33 1,60 Запустить
rtx3080-3.16.64.160
128 000
pipeline
3 127,37 ₽ 73.31 1,59 Запустить
rtx3090-2.16.64.160.nvlink
128 000
tensor
2 139,77 ₽ 4,41 Запустить
rtx5090-1.16.64.160
128 000
1 141,77 ₽ 2,55 Запустить
rtx3080-4.16.64.160
128 000
tensor
4 162,57 ₽ 2,72 Запустить
teslaa100-1.16.64.160
128 000
1 211,77 ₽ 123.20 9,00 Запустить
h100-1.16.64.160
128 000
1 341,77 ₽ 8,99 Запустить
h100nvl-1.16.96.160
128 000
1 367,41 ₽ 203.48 10,86 Запустить
teslaa100-2.24.96.160.nvlink
128 000
tensor
2 411,81 ₽ 15.00 19,38 Запустить
h200-1.16.128.160
128 000
1 423,04 ₽ 17,15 Запустить
h200-2.24.256.160.nvlink
128 000
tensor
2 839,97 ₽ 35,70 Запустить
Цены:
Наименование GPU Цена, час TPS Параллельность (макс.)
teslaa2-2.16.32.160
128 000
tensor
2 51,34 ₽ 1,30 Запустить
teslaa10-2.16.64.160
128 000
tensor
2 83,37 ₽ 3,43 Запустить
rtx3090-2.16.64.160
128 000
tensor
2 139,77 ₽ 103.00 3,76 Запустить
rtx3090-2.16.64.160.nvlink
128 000
tensor
2 139,77 ₽ 3,76 Запустить
rtx5090-1.16.64.160
128 000
1 141,77 ₽ 1,71 Запустить
rtx3080-4.16.64.160
128 000
tensor
4 162,57 ₽ 77.46 2,29 Запустить
rtx4090-2.16.64.160
128 000
tensor
2 171,77 ₽ 108.67 3,75 Запустить
teslaa100-1.16.64.160
128 000
1 211,77 ₽ 14.00 8,27 Запустить
h100-1.16.64.160
128 000
1 341,77 ₽ 8,15 Запустить
h100nvl-1.16.96.160
128 000
1 367,41 ₽ 10,02 Запустить
teslaa100-2.24.96.160.nvlink
128 000
tensor
2 411,81 ₽ 18,70 Запустить
h200-1.16.128.160
128 000
1 423,04 ₽ 16,31 Запустить
h200-2.24.256.160.nvlink
128 000
tensor
2 839,97 ₽ 35,00 Запустить

Связанные модели

Остались вопросы?

Свяжитесь с нашей специализированной группой поддержки по нейросетям support@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.

Мы используем файлы cookie и сервисы веб-аналитики для обеспечения работы сайта, анализа посещаемости и улучшения качества наших услуг.
Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности и даете согласие на обработку cookie-файлов и технических данных.