CogVideoX1.5-5B

CogVideoX1.5-5B — это открытая модель генерации видео по тексту, аналогичная коммерческой модели QingYing. Она предназначена для создания видео на основе текстовых запросов, поддерживает английский язык, а также генерацию из изображений (версия CogVideoX1.5-5B-I2V). Модель доступна на платформах Hugging Face, ModelScope и WiseModel.

Характеристики:

• Разрешение видео: 1360×768 (минимальная сторона 768 пикселей, максимальная ≤1360, соотношение сторон должно быть кратно 16).
• Длительность: 5 или 10 секунд (по умолчанию 5 секунд).
• Частота кадров: 16 кадров/с.
• Количество кадров: должно быть равно 16N+1, где N ≤ 10 (по умолчанию 81).
• Ограничение на длину промпта: до 224 токенов.
• Поддерживаются BF16 (рекомендуется), FP16, FP32, FP8, INT8. INT4 не поддерживается.

Требования к инференсу:

• VRAM: В режиме BF16: от 10 ГБ (diffusers). В режиме INT8: от 7 ГБ (diffusers с оптимизациями).
• GPU: поддерживается NVIDIA Ampere или более новая архитектура (A100/H100 для оптимальной скорости).
• Скорость инференса: На A100: ~1000 секунд для 5-секундного видео (BF16). На H100: ~550 секунд для 5-секундного видео (BF16).

---

Модель является составной частью пайплайна генерации изображений, состоящего из:

• Text encoder: ~4.8B параметров,
• Transformer: ~5.6B параметров,
• VAE: ~216M параметров.

Всего: ~10.5B параметров

---

Строка "Потребление памяти" рассчитана на основе размера весов в указанной точности с добавочным коэффициентом +10% на инференс: 
  model_parameters_count * bytes_per_parameter * 1.1 / 1024^3 
где model_parameters_count - количество параметров модели, bytes_per_parameter - количество байтов, используемых для хранения одного параметра. Для 16 bit = 2, 8 bit = 1, 4 bit = 0.5.

Дата анонса: 02.11.2024
Параметров: 5.6B
Потребление памяти: 5.4 ГБ в точности 4 бит, 10.8 ГБ в точности 8 бит, 21.6 ГБ в точности 16 бит
Разработчик: Z.ai
Лицензия: The CogVideoX License

Воспользуйтесь нашими готовыми публичными эндпоинтами бесплатно для теста инференса и знакомства с CogVideoX1.5-5B. Получить токен для доступа к API вы можете на странице управления токенами после регистрации и верификации.

Арендуйте собственный физически выделенный инстанс с почасовой оплатой или на длительный срок с помесячной оплатой.

Мы рекомендуем создание частных инстансов в случаях, если необходимо:

• получить максимальную производительность эндпоинта,
• получить полный контекст для обработки больших запросов и диалогов,
• обеспечить максимальную безопасность, для обработки данных в выделенном изолированном пространстве,
• использовать кастомизированные веса: fine-tuned версии или lora-адаптеры.

Свяжитесь с нашей специализированной группой поддержки по нейросетям nn@immers.cloud или отправьте ваш запрос в отдел продаж sale@immers.cloud.