DreamGaussian: генератор 3D-моделей — что умеет и что нужно для запуска

DreamGaussian — это генератор трёхмерных моделей с открытым исходным кодом. Инструмент решает задачу быстрого создания 3D-контента из текстового описания или одного изображения. В основе лежит метод Generative Gaussian Splatting, представленный авторами на конференции ICLR 2024.

Что умеет

• Text-to-3D: генерация трёхмерной модели по текстовому описанию.
• Image-to-3D: генерация трёхмерной модели по одному входному изображению.
• Формат представления: использует Gaussian Splatting. Авторы заявляют, что это обеспечивает эффективное создание 3D-контента.

Что нужно для запуска

• Платформа: локальный запуск. Код написан на Python.
• Лицензия: MIT. Разрешено свободное использование, изменение и распространение.
• Репозиторий: github.com/dreamgaussian/dreamgaussian. Последнее изменение кода датировано 2 января 2024 года.
• Версия: последний выпуск — 0.1.0. Авторы не указывают конкретные требования к объёму оперативной памяти или модели видеокарты в общем доступе.

Кому подойдёт

Инструмент будет полезен исследователям и разработчикам, которые работают с генеративными 3D-технологиями и могут запускать Python-код локально. Наличие открытой лицензии MIT позволяет встраивать наработки в собственные проекты.

Не подойдёт тем, кто ищет готовое приложение с графическим интерфейсом или облачный сервис без необходимости настройки среды исполнения. Также стоит учесть, что репозиторий не обновлялся с начала 2024 года, а версия имеет статус раннего выпуска.

Сайт проекта доступен по адресу dreamgaussian.github.io. Для оценки текущего состояния кода и документации имеет смысл обратиться непосредственно в репозиторий.