CPU3DИИ-инструменты для 3D, видео и звука

SceneReGen собирает 3D-сцены из одного изображения, генерируя объекты в общей системе координат

На arXiv 25 августа 2026 года опубликована работа SceneReGen: Generative Reconstruction of 3D Scenes from a Single Image. Авторы предлагают метод генеративной реконструкции 3D-сцен по одному изображению: вместо того чтобы восстанавливать сцену как единое целое, SceneReGen генерирует отдельные объекты и собирает их в общей системе координат, выровненной по наблюдению. Ключевая идея — selective pose factorization: ориентация объекта кодируется прямо в генерируемом mesh, а перенос и масштаб оцениваются отдельно из признаков сцены. На подмножестве 3D-FUTURE метод показывает лучшие результаты по scene-level CD, scene-level F-Score и 3D bounding-box IoU среди рассмотренных методов. Код авторы не выкладывали.

Что это значит

SceneReGen решает задачу, которую ни один инструмент из нашего справочника сейчас не закрывает. OpenLRM, Hunyuan3D 2.1 и TRELLIS — это генераторы одиночных 3D-моделей по одному изображению (image-to-3d). Они создают один объект в центрированной, нормализованной по масштабу системе координат. SceneReGen работает на уровень выше: принимает изображение сцены и маски экземпляров, а на выходе даёт несколько объектов, расставленных в общей сцене. Разрыв между генерацией объекта и реконструкцией сцены — ровно та проблема, которую авторы называют representation gap. В наших паспортах этот разрыв виден напрямую: у всех трёх инструментов задача указана как image-to-3d, а не scene reconstruction. Ни один из них не принимает маски экземпляров и не собирает несколько объектов в общую сцену. Практического применения у SceneReGen пока нет: код не опубликован, веса не выложены, разработчик не уточняет требования к видеопамяти или форматы экспорта. Это исследовательская работа, которая показывает направление — генеративная сборка сцен из готовых ассетов, — но не даёт готового инструмента для сравнения с тем, что уже есть в справочнике CPU3D. Если авторы опубликуют код и веса, SceneReGen может стать первым в нашем справочнике инструментом для генеративной реконструкции сцен, а не одиночных моделей. Пока же это повод следить за развитием темы, а не замена существующим генераторам.
SceneReGen: генеративная реконструкция 3D-сцен из одного изображения и масок экземпляров Вход изображение сцены маски экземпляров SceneReGen генерация объектов в общей системе координат selective pose factorization ориентация в mesh, перенос и масштаб отдельно Выход несколько 3D-объектов расставлены в общей сцене Отличие от генераторов одиночных моделей OpenLRM image-to-3d Hunyuan3D 2.1 image-to-3d TRELLIS image-to-3d SceneReGen scene reconstruction Результаты на 3D-FUTURE scene-level CD scene-level F-Score 3D bounding-box IoU
Как устроен метод. Схема нарисована по этой заметке.

Смотрите также