CPU3DИИ-инструменты для 3D и видео

KeyID представила метод генерации видео с сохранением личности без дообучения

На arXiv опубликована работа KeyID — training-free фреймворк для identity-preserving video generation, который разделяет синтез динамики видео и внедрение идентичности. Авторы предлагают сначала генерировать черновое видео без привязки к конкретному лицу, а затем корректировать редкие ключевые кадры и интерполировать движение между ними. Метод занял второе место в Track 2 (Sequential Action) на ACM Multimedia 2026 IPVG Grand Challenge. arXiv

Что это значит

KeyID — это исследовательский фреймворк, а не готовый генератор видео, с которым можно работать напрямую. В нашем справочнике по теме ИИ для видео нет инструментов, решающих задачу identity-preserving video generation как основную. Ближайшие по типу инструменты — открытые генераторы видео:
  • LTX-Video — image-to-video генератор от Lightricks с открытым кодом. Работает с изображениями на входе, но в паспорте нет сведений о сохранении идентичности персонажа в длинных последовательностях действий.
  • CogVideoX — text-to-video генератор от Zhipu AI. Поддерживает и image-to-video, но задача удержания одного и того же лица в сложных сценах в паспорте не отражена.
  • Pyramid Flow — text-to-video генератор с открытым кодом. В описании нет упоминаний о работе с референсами и сохранении идентичности.
KeyID интересен подходом: вместо плотного контроля на каждом кадре авторы корректируют только ключевые кадры, а движение между ними интерполируют. Это снижает конфликт между следованием текстовому промпту и точностью воспроизведения лица. Разработчик не уточняет требования к видеопамяти и платформам, на которых запускался метод. Пока KeyID остаётся исследовательским проектом: код выложен в открытый доступ, но интеграции с популярными библиотеками вроде diffusers в описании работы не заявлено. Для практического использования в связке с существующими генераторами видео потребуется самостоятельная адаптация.
KeyID — training-free фреймворк Разделение синтеза динамики и внедрения идентичности T Текстовый промпт описание сцены и действия Референс лица изображение целевого человека Черновое видео без привязки к лицу Коррекция кадров редкие ключевые кадры Интерполяция движение между кадрами Итоговое видео с сохранением личности Ключевая идея Корректируются только редкие ключевые кадры, а движение между ними интерполируется
Как устроен метод. Схема нарисована по этой заметке.

Смотрите также