本页为日语原文的AI翻译。如有出入,以日语版为准。
OctreeSplat:利用八叉树改变密度的前馈式3DGS,已在arXiv公开
Yibin Zhao等人发表了OctreeSplat。该方法无需逐场景优化,按各处的复杂程度分配高斯数量,并称可减少基元数量。
本文由AI生成,未经人工事先审核自动发布。
- 发布日期
- 2026.11.02(当地)
- 用途
- 研究・制作・机器人
- 出处
- 1条(en)(其中一手信息 1条)
要点
- 前馈式3DGS,利用八叉树按局部复杂程度放置高斯
- 使用冻结的视觉基础模型,额外训练为76M参数、35 GPU小时(作者公布值)
- 在Replica、TUM、Tanks and Temples、DTU上评估。称在减少高斯数量的同时保持了质量
发生了什么
arXiv上已于2026年11月2日收录OctreeSplat: Hierarchical Octree-Guided Feed-Forward Gaussian Splatting。作者为Yibin Zhao、Yihan Pan、Wenli Yang、Jun Nan、Jianjun Yi。
前馈方式无需逐场景优化,仅通过已训练网络的推理来生成3DGS。另一方面,由于图像和空间的分辨率固定,存在难以按各处复杂程度分配高斯的问题。作者称用八叉树解决了这一点。
作者报告称,在新视角合成、深度合成和表面重建各项任务中取得了有竞争力的结果。同时称能够在减少高斯数量的情况下保持重建质量。
原理与内容
从多视角图像中,利用冻结的视觉基础模型(VFM)提取特征和几何先验信息。
基于这些信息构建分层八叉树,并预测各节点的“致密化分数”。这样,复杂区域放置较多高斯,简单区域放置较少高斯。
深度渲染使用随机实体体渲染(stochastic solids volume rendering)。作者称,这能强化深度渲染和几何监督信号,也有助于表面重建。
在已知相机参数的情况下,可通过可选的测试时优化(TTO)模块,提高预测值与真值的一致程度。
数据一览
| 额外训练参数 | 7600万(作者公布值) |
|---|---|
| 训练成本 | 35 GPU小时(作者公布值) |
| 评估数据集 | Replica、TUM、Tanks and Temples、DTU |
| 评估任务 | RGB视角合成、深度合成、表面重建 |
| 基础模型 | 冻结的VFM(摘要中未给出具体模型名) |
对实务的影响
如果能控制高斯数量,有可能减轻数据量和渲染负载。对于考虑Web或移动端分发的场景,这是值得关注的方向。
无需等待优化、直接从拍摄得到3DGS的流程,也与现场快速确认以及面向机器人的场景生成相关。不过,其在实际工作中的有效性,仅凭本次材料无法判断。
由于支持表面重建,在涉及网格化的用途中也有探讨的余地。
如何试用
- 阅读arXiv页面上的论文正文,确认八叉树的构成和致密化分数的设计。
- 待代码或预训练模型公开后,用自己拍摄的数据比较高斯数量和画质。
注意事项・未确认事项
- 目前确认到的只有arXiv摘要。论文正文中的详细数值,以及与其他方法的定量比较均未确认。
- 代码和模型是否公开、许可证如何,从材料中无法确认。
- “有竞争力”“保持质量”是作者的说法。摘要中未写明削减率等具体数值。
- 所用VFM的种类,以及支持的输入张数和场景规模均未确认。
- 是否经过同行评审,从材料中无法得知。
术语
- 前馈式3DGS
- 不对每个场景进行迭代优化,而是通过已训练网络的推理一次性预测高斯的方式。
- 八叉树(Octree)
- 通过反复将空间八等分,按位置改变细致程度来表示空间的分层结构。
- 视觉基础模型(VFM)
- 在大规模数据上预训练、可用于多种视觉任务的图像模型。
- 测试时优化(TTO)
- 在推理时根据输入额外调整参数的处理。
出处
一手信息(发布方・论文・代码仓库)
- OctreeSplat: Hierarchical Octree-Guided Feed-Forward Gaussian SplattingarXiv(arxiv.org)・en
引出本文的X帖子
本文由AI根据出处(一手信息)以日语生成,未经人工事先审核,经过与出处核对等自动检查后自动发布(关于AI的使用)。数值和规格为发布方信息,本站未独立验证。详情请查阅原文。如发现错误,请通过联系表单告知,我们将尽快确认并更正。 本页为日语原文的AI翻译。如有出入,以日语版为准。 日语原文
运营公司的服务ガウシアンスプラッティングとは(IZUTSUYA株式会社)