Luce представила генерацию 3D-ассетов с PBR-материалами и переосвещением по одному изображению

Исследователи опубликовали на arXiv работу Luce: Relightable Gaussians for 3D Asset Generation, в которой представлен метод генерации 3D-моделей из одного изображения с поддержкой физически корректного рендеринга. Модель использует вокселизированное мультимодальное гауссово облако, где отдельные примитивы отвечают за геометрию, альбедо, металличность-шероховатость и нормали. Код авторы не выкладывали.

Что это значит

Luce напрямую конкурирует с инструментами image-to-3d из нашего справочника, но с акцентом на PBR-материалы и переосвещение. Сравним с тем, что уже есть. У Hunyuan3D 2.1 от Tencent заявлена генерация «production-ready PBR material», то есть PBR-подход уже присутствует. Однако в паспорте нет данных о том, поддерживает ли модель переосвещение как отдельную операцию или PBR служит только для качественной текстуры при экспорте. TRELLIS от Microsoft и OpenLRM от 3DTopia в паспортах не упоминают PBR-материалы вовсе. TRELLIS экспортирует текстурированный меш в glb, OpenLRM — в obj, но о разделении на альбедо, металличность и нормали в описаниях ничего нет. Luce заявляет улучшение FID на 28% и CLIP-метрики 0.8519 против 0.8299 у лучшего базового метода, но без открытого кода и весов проверить эти результаты и сравнить с существующими инструментами на практике пока нельзя. Разработчик не уточняет требования к видеопамяти, форматы экспорта и лицензии. Пока Luce остаётся исследовательской работой без публичного кода, практическая ценность для пользователей справочника ограничена. Если код появится, сравнение с Hunyuan3D 2.1 по качеству PBR-материалов станет первой проверкой.