Llama-3.3-70B — новая версия популярной серии llama 3, оптимизированная для диалоговых и ассистентских сценариев. Модель обучена на более чем 15 триллионах токенов из открытых источников, контекстное окно увеличено до 128 тысяч токенов, что позволяет эффективно обрабатывать длинные диалоги и большие тексты. Llama-3.3-70B использует методы supervised fine-tuning (SFT) и reinforcement learning with human feedback (RLHF) для лучшей адаптации к пользовательским запросам, обеспечивая не только точность, но и безопасность ответов.
Модель распространяется по специальной коммерческой лицензии Llama 3.3 Community License, которая позволяет использовать её как в исследовательских, так и в коммерческих целях, при соблюдении политики допустимого использования. Llama-3.3-70B не предназначена для применения в критических областях (например, медицина, финансы, управление инфраструктурой и т. д.).
Llama-3.3-70B — это мощная языковая модель, оптимизированная для диалоговых и ассистентских задач, идеально подходящая для создания чат-ботов, автоматизации поддержки, по сути она является универсальным инструментом для задач генерации, суммаризации, перевода, написания кода и других применений, где требуется качественная обработка естественного языка.
| Наименование модели | Контекст | Тип | GPU | Статус | Ссылка |
|---|
Для данной модели пока нет публичных эндпоинтов.
Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.
Мы рекомендуем создание частных инстансов в случаях, если необходимо:
| Наименование | GPU | TPS | Параллельность (макс.) | |||
|---|---|---|---|---|---|---|
131 072 |
1 | 367,41 ₽ | 1,14 | Запустить | ||
131 072 tensor |
2 | 411,81 ₽ | 2,55 | Запустить | ||
131 072 |
1 | 423,04 ₽ | 2,21 | Запустить | ||
131 072 tensor |
2 | 439,97 ₽ | 2,55 | Запустить | ||
131 072 tensor |
4 | 513,04 ₽ | 1,62 | Запустить | ||
131 072 pipeline |
6 | 520,97 ₽ | 1,68 | Запустить | ||
131 072 tensor |
8 | 539,21 ₽ | 2,73 | Запустить | ||
131 072 tensor |
8 | 670,97 ₽ | 2,72 | Запустить | ||
131 072 tensor |
2 | 699,97 ₽ | 2,55 | Запустить | ||
131 072 tensor |
2 | 839,97 ₽ | 5,34 | Запустить | ||
| Наименование | GPU | TPS | Параллельность (макс.) | |||
|---|---|---|---|---|---|---|
131 072 |
1 | 423,81 ₽ | 1,46 | Запустить | ||
131 072 tensor |
2 | 440,74 ₽ | 34.80 | 1,85 | Запустить | |
131 072 tensor |
2 | 441,52 ₽ | 1,85 | Запустить | ||
131 072 pipeline |
6 | 521,74 ₽ | 1,05 | Запустить | ||
131 072 tensor |
8 | 539,21 ₽ | 2,15 | Запустить | ||
131 072 tensor |
8 | 671,74 ₽ | 2,14 | Запустить | ||
131 072 tensor |
2 | 700,74 ₽ | 39.84 | 1,84 | Запустить | |
131 072 tensor |
2 | 729,47 ₽ | 59.71 | 2,48 | Запустить | |
131 072 pipeline |
6 | 791,74 ₽ | 2,08 | Запустить | ||
131 072 tensor |
2 | 840,74 ₽ | 4,61 | Запустить | ||
131 072 tensor |
8 | 1 031,74 ₽ | 3,58 | Запустить | ||
| Наименование | GPU | TPS | Параллельность (макс.) | |||
|---|---|---|---|---|---|---|
131 072 pipeline |
3 | 657,66 ₽ | 1,89 | Запустить | ||
131 072 tensor |
4 | 816,34 ₽ | 3,70 | Запустить | ||
131 072 tensor |
2 | 840,74 ₽ | 2,99 | Запустить | ||
131 072 tensor |
2 | 840,74 ₽ | 2,99 | Запустить | ||
131 072 tensor |
4 | 848,44 ₽ | 3,70 | Запустить | ||
131 072 tensor |
8 | 1 031,74 ₽ | 1,87 | Запустить | ||
131 072 pipeline |
3 | 1 047,66 ₽ | 12.26 | 1,88 | Запустить | |
131 072 pipeline |
3 | 1 105,60 ₽ | 2,83 | Запустить | ||
131 072 tensor |
4 | 1 336,34 ₽ | 3,69 | Запустить | ||
131 072 tensor |
4 | 1 448,44 ₽ | 4,97 | Запустить | ||
Свяжитесь с нашей специализированной группой поддержки по нейросетям support@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.