VideoCrafter: генератор видео — что умеет и что нужно для запуска

VideoCrafter — это набор открытых моделей для генерации видео по текстовому описанию или стартовому изображению. Инструмент создан лабораторией Tencent AI Lab и ориентирован на исследователей и разработчиков, которые хотят экспериментировать с диффузионными моделями видео, имея доступ к исходному коду.

Что умеет

• Генерация видео по тексту (text-to-video). Модель создаёт короткое видео на основе текстового описания.
• Генерация видео по изображению (image-to-video). Можно подать на вход статичную картинку и получить анимированную сцену.
• Работа с диффузионными моделями. Авторы описывают VideoCrafter2 как решение, направленное на преодоление ограничений данных для высококачественных видео-диффузионных моделей.

Что нужно для запуска

• Платформа. Код написан на Python. Для запуска потребуется среда с поддержкой Python и соответствующих библиотек.
• Оборудование. Авторы не указывают точные минимальные требования к видеопамяти или оперативной памяти. Поскольку речь идёт о диффузионных моделях, для работы локально потребуется дискретный GPU с достаточным объёмом видеопамяти.
• Лицензия. Код открыт, но лицензия нестандартная — авторы рекомендуют проверять условия использования вручную в репозитории.
• Репозиторий. Исходный код доступен на github.com/AILab-CVC/VideoCrafter. Последнее изменение кода зафиксировано 9 января 2026 года.

Кому подойдёт

VideoCrafter рассчитан в первую очередь на исследователей и разработчиков, знакомых с экосистемой Python и диффузионными моделями. Инструмент будет полезен тем, кому нужен открытый код для дообучения, модификации или изучения архитектуры генеративных видео-моделей. Для бытового использования «из коробки» без навыков программирования он не предназначен. Также стоит учесть нестандартную лицензию, если вы планируете коммерческое применение.

Страница проекта с дополнительной информацией доступна по адресу ailab-cvc.github.io/videocrafter2/. Последний выпуск на момент анализа репозитория — VideoCrafter1, при этом авторы описывают работу над второй версией.