CPU3DИИ-инструменты для 3D, видео и звука

Reliability-Regulated Trajectory Optimization для COLMAP-free 3DGS выложен на arXiv

На arXiv опубликована работа о методе оптимизации траектории камеры для progressive COLMAP-free 3D Gaussian Splatting. Авторы предлагают единый механизм самоконтролируемой двунаправленной цикличности, который регулирует оценку траектории на двух горизонтах: прямое распространение движения с адаптивным гейтированием кинематических warm-start и ретроспективная коррекция траектории через динамически взвешенные ограничения согласованности относительных поз в скользящем окне. Код выложен в открытый доступ. Подробнее — на странице работы.

Что это значит

Работа напрямую касается Gaussian Splatting (3DGS) — генератора 3D-моделей от Inria и MPII. В нашем паспорте этого инструмента зафиксировано, что оригинальная реализация требует 24 ГБ видеопамяти для обучения до качества, заявленного в статье, и работает на CUDA через PyTorch. Новый метод нацелен на progressive-сценарий, где позы камер отслеживаются последовательно без COLMAP. В паспорте 3DGS такой режим отдельно не описан: авторы оригинальной реализации не уточняют поведение при прогрессивном отслеживании и не описывают механизмы коррекции дрейфа траектории. Предложенный reliability-регулятор — это внешняя по отношению к базовой реализации надстройка, которая решает проблему накопления ошибок в ранних попарных регистрациях. Лицензия нового кода автором не указана. У базового 3DGS лицензия ограничивает использование некоммерческими исследовательскими целями, и при распространении производных работ это ограничение должно сохраняться. Метод адресован исследователям, которые работают с progressive-режимами 3DGS и сталкиваются с дрейфом траектории. Для пользователей, применяющих классический пайплайн с COLMAP, изменения в поведении базового инструмента не заявлены.
Reliability-Regulated Trajectory Optimization для COLMAP-free 3DGS Кадры видео последовательность без COLMAP Прямое движение адаптивное гейтирование кинематических warm-start Ретроспектива динамически взвешенные ограничения поз Окно согласованность двунаправленная цикличность Reliability-регулятор самоконтролируемая оценка траектории на двух горизонтах Progressive 3DGS без COLMAP траектория без дрейфа Лицензия нового кода не указана; базовый 3DGS — некоммерческая исследовательская лицензия
Как устроен метод. Схема нарисована по этой заметке.

Смотрите также