CPU3D3D、视频与音频的 AI 工具

LichtFeld-Studio 发布用于图像匹配的 RoMa v1 权重

LichtFeld-Studio 工具发布了新版本——RoMa v1 dense matcher weights。这是一个采用原生 .lfw 格式的常驻模型资产,用于稠密化管线中的图像对匹配。作者将该版本标记为 pre-release,只是为了不让它出现在 Latest 徽章中:这不是应用程序的发布,而是一个模型文件。 该模型由两个检查点组合而成:匹配器 Parskatt/RoMa roma_outdoor.pth,采用 MIT 许可证;以及骨干网络 facebookresearch/dinov2 ViT-L/14,采用 Apache-2.0。内部还使用了来自 torchvision vgg19_bn 的 fine-feature stem,采用 BSD-3-Clause。该文件包含 636 个张量、416 930 219 个 float16 参数,位置嵌入已针对工作分辨率 448 和 560 烘焙。文件头中记录了这两个源检查点的 SHA-256,因此该资产可以追溯到精确的输入数据。

这意味着什么

对于 LichtFeld-Studio 来说,这是对场景稠密化管线的补充:RoMa v1 权重用于在 densification 时进行图像对匹配。该工具本身是一个基于 3D Gaussian Splatting 的 3D 生成器,开源,采用 GPL-3.0,使用 C++23 编写,在 NVIDIA 硬件上需要 CUDA 12.8+。支持导出为 PLY、SOG、SPZ 和 standalone HTML viewer。 在工具参数表中,此前并未列出这个模型资产:AI for 3D 指南的相关章节将 LichtFeld-Studio 描述为用于训练、检查和导出高斯场景的应用程序,未提及具体的匹配器权重。现在该工具多了一个可单独下载的组件,且来源链条透明:源检查点的 SHA-256 直接记录在文件头中。 该版本面向使用 LichtFeld-Studio densification 管线的用户:RoMa v1 权重是一个常驻模型资产,不会随应用程序版本变化而改变。
RoMa v1 — 图像匹配模型资产 LichtFeld-Studio · dense matcher weights · .lfw 格式 原始检查点 两个来源 roma_outdoor.pth dinov2 ViT-L/14 RoMa v1 构建 权重合并 636 个张量 416 930 219 个参数 .lfw 文件 原生格式 float16 头部含 SHA-256 场景稠密化管线 densification · 配对匹配 3D Gaussian Splatting C++23 · CUDA 12.8+ 导出 输出格式 PLY · SOG · SPZ HTML viewer 许可证:MIT · Apache-2.0 · BSD-3-Clause · GPL-3.0
方法是如何构成的。示意图根据这篇简讯绘制。

相关阅读