本页为日语原文的AI翻译。如有出入,以日语版为准。

工具

Blender 5.2 插件“Photogram3D”发布,可由照片和视频生成网格

tricky_3d 发布了面向 Blender 5.2 的摄影测量插件 Photogram3D。该插件在内部使用 COLMAP 和 OpenMVS,可由照片或视频生成带纹理的网格。

本文由AI生成,未经人工事先审核自动发布。

用途
制作・文化・研究
出处
2条(en)(其中一手信息 2条)

要点

  1. 这是一款采用 GPL-3.0-or-later 许可的插件,在 Blender 内即可完成从相机估计到网格和纹理生成的全部流程。
  2. 插件使用 COLMAP 4.2.1 和 OpenMVS 2.4.0,据称所需工具会由插件自动获取并完成设置。
  3. 插件以 Windows 10/11 为主要支持对象;在 Linux 和 macOS 上,需要自行安装外部工具并设置路径。
目录
  1. 发生了什么
  2. 原理与内容
  3. 数据一览
  4. 对实务的影响
  5. 如何试用
  6. 注意事项・未确认事项
  7. 术语
  8. 出处

发生了什么

Photogram3D 是一款面向 Blender 5.2 的插件,可由照片或视频生成带纹理的网格。发布页面在 Gumroad(价格为 $0+,即从免费起、金额自定),源代码公开在 GitHub 仓库中。页面上标注的版本为 photogram3d-0.3.15。

原理与内容

处理流程依次为:照片或视频、相机位置估计、稠密点云、在 Blender 内裁剪(Crop)、网格生成、对接缝进行混合的纹理生成。相机估计使用 COLMAP 4.2.1,深度图、网格和纹理的生成使用 OpenMVS 2.4.0。操作在 3D 视图的侧边栏(N→Photogram3D)中进行。在裁剪阶段,可以校正地面水平、通过指定两点设置实际尺寸,以及放置裁剪框。\n\n质量预设从 Draft 到 Full,会根据检测到的 CPU、RAM 和 GPU 给出建议。深度图可使用 CPU、NVIDIA GPU,或两者同时计算。对于视频输入,据称会根据相机运动选取帧,为每一帧创建跟随画面的相机,并可在扫描结果后方播放视频。\n\n针对难拍摄的场景,插件提供了以下功能:对折返的相机解进行路径检查、按拍摄顺序估计解(适用于从反面看起来相似的物体)、面向缺乏纹理物体的 AI Features(ALIKED 和 LightGlue)、排除所选相机后重新求解,以及基于现有相机重新求解。此外还可以将两次扫描(两段视频、不同日期的拍摄等)合并为一个。附加功能方面,有使用 MoGe-2 法线的 AI Polish

数据一览

支持的 Blender5.2
版本(页面标注)photogram3d-0.3.15
相机估计COLMAP 4.2.1
网格与纹理生成OpenMVS 2.4.0
工具安装大小约 0.6 GB(含 COLMAP 的 CUDA 版,包括 COLMAP、OpenMVS、FFmpeg)
运行系统Windows 10/11(64 位)。Linux/macOS 需外部安装
GPU有 NVIDIA GPU 时会使用
内存参考Normal 预设需 16 GB RAM
已验证设备RTX 3070 Laptop(8 GB)、GTX 1650 Ti(4 GB)两台 Windows 笔记本电脑(均为 16 GB RAM)
许可证GPL-3.0-or-later
价格$0+
作者署名Kruglov Iurii、Anthropic Claude AI

对实务的影响

以往做摄影测量,需要分别操作 COLMAP 和 OpenMVS,再把结果导入 DCC 工具,相当费事。据称该插件把这些工序集中到 Blender 侧边栏中,并将工具的获取和设置也自动化了。对使用 Blender 的创作者,以及想尝试扫描文物或小物件的人来说,上手门槛有可能降低。\n\n另一方面,支持范围限于 Blender 5.2,且以 Windows 为主。在日本国内用于业务时,需要确认它能否在现有设备和操作系统上运行,以及 GPL-3.0-or-later 的条件是否适合本公司的使用方式。

如何试用

  1. 在 Blender 5.2 中,通过 Edit › Preferences › Get Extensions 选择“Install from Disk…”,并指定从 Gumroad 下载的 zip 文件。
  2. 在 Preferences › System › Network 中启用 Allow Online Access。
  3. 在 3D 视图中打开 N→Photogram3D,执行 Install Tools(下载量约 0.6 GB)。
  4. 先用较低的预设,试一组小型对象的照片。

注意事项・未确认事项

  • 根据所提供的材料,无法确认表示精度、速度和重建质量的基准测试。
  • 文中记载仅在 2 台 Windows 笔记本电脑上确认过运行。在 Linux 和 macOS 上的运行情况(包括外部工具的安装)尚未确认。
  • 作者署名中包含“Anthropic Claude AI”。据称开发经过和测量方法写在 DEVELOPMENT.md 中,但材料中没有其内容。
  • 未能获取 GitHub 仓库的正文,README、完整许可证文本和更新记录均未确认。
  • 通过 Brush 实现的高斯泼溅功能,其质量和输出格式在材料中无法确认。
  • COLMAP、OpenMVS 等内置工具各自的许可条款,材料中没有记载。

术语

摄影测量(フォトグラメトリ)
由多张照片还原对象三维形状的方法。
COLMAP
开源软件,可从照片估计相机的位置和朝向并生成点云。
OpenMVS
基于已估计的相机还原稠密形状,并生成网格和纹理的库。
深度图(デプスマップ)
表示每个像素深度(距离)的图像。
ALIKED + LightGlue
用于检测和匹配图像特征点的 AI 方法组合,据称对图案较少的物体有效。
MoGe-2
可从单张图像估计几何信息的模型。在该插件中用于法线修正。
Brush
用于训练和生成高斯泼溅的工具。

出处

一手信息(发布方・论文・代码仓库)

本文由AI根据出处(一手信息)以日语生成,未经人工事先审核,经过与出处核对等自动检查后自动发布(关于AI的使用)。数值和规格为发布方信息,本站未独立验证。详情请查阅原文。如发现错误,请通过联系表单告知,我们将尽快确认并更正。 本页为日语原文的AI翻译。如有出入,以日语版为准。 日语原文

运营公司的服务3DGS Universal Viewer(3Dasset.io)(IZUTSUYA株式会社)

订阅邮件

每3天一次于日本时间7:00发送最新一期(日语)。

邮件仅以日语发送,可在日语版页面订阅。