本期文章

01工具

两款面向 Blender 的 3DGS 插件:SkySplat 与 KIRI 版的功能和区别

本文梳理两款在 Blender 中处理 Gaussian Splatting 的开源插件:SkySplat 和 3DGS Render。前者以基于无人机视频的训练为主,后者以编辑、渲染和简易光照为主。

对实务的影响对制作方而言,将 Blender 中的实拍 3DGS 与现有的网格、灯光和相机合成,多了一种选择。SkySplat 负责从拍摄到训练,3DGS Render 负责训练后的编辑与合成。两者分工不同,与其说是竞争关系,不如说是前后工序的区别。

出处:github.com 等1条阅读全文

02机器人

面向腕部相机VLA,用3DGS生成训练数据,以主板拆解的到达动作进行验证

Zuoxu Wang等人向arXiv提交了一种方法:用3DGS重建真实环境,并合成腕部相机画面。论文报告称,在主板拆解的到达动作上,成功率高于遥操作演示。

对实务的影响这是把3DGS用于以外观再现为核心的Real2Sim数据生成的一个例子。它显示出一种可能:即使在反光物体或薄型物体这类难以网格化的现场,也可以通过短时间的拍摄生成训练数据。

出处:arxiv.org阅读全文

03研究

面向单目相机户外导航的3DGS SLAM“SG^2SLAM”在arXiv发布

Ziang Guo等人在论文中提出了面向户外单目导航的3DGS SLAM“SG^2SLAM”。论文称,该方法在KITTI和Waymo Open Dataset上优于以往基于逐帧对应的方法。

对实务的影响如果仅凭单目相机就能获得稠密地图和轨迹,则有可能用于难以搭载LiDAR的小型移动体和机器人的户外导航。但从材料中无法确认实机验证情况。

出处:arxiv.org阅读全文

04研究

以损失的一阶变分决定3DGS高斯增减的方法:VinUniversity公开论文与代码

一种不依赖经验规则、而是用由重建损失得出的评分来决定3DGS密度控制的方法已经公开。面向标准版3DGS的代码也已发布在GitHub上,据报告,在Mip-NeRF360的7个场景中,该方法以较少的高斯数量取得了较高的指标。

对实务的影响如果能在减少高斯数量的同时提高质量指标,就可能有助于降低文件大小和渲染负载。对从事Web、移动端分发和查看器的从业者来说,这可能成为在训练端压缩数量的手段之一。

出处:arxiv.org 等1条阅读全文

05工具

VAST-AI的Hugging Face Space“TripoSplat”:由图像生成3DGS的PLY文件

VAST-AI在Hugging Face上发布了可将图像转换为高斯泼溅的演示“TripoSplat”。有帖子称,其输出的PLY可以在浏览器编辑工具SuperSplat中打开。

对实务的影响由于以PLY或.splat输出,有可能可以交给现有的3DGS查看器和编辑工具。不过实际兼容性在材料中仅限于发帖者的查看报告。

出处:huggingface.co 等1条阅读全文

订阅邮件

每3天一次于日本时间7:00发送最新一期(日语)。

邮件仅以日语发送,可在日语版页面订阅。