01研究
Amazonなどの研究チームが、魚眼画像だけで全視野の3DGSと位置の合ったメッシュを作る手法GOFishを公開しました。LiDARなしでシミュレーション用デジタルツインを得ることを狙っています。
実務への影響ロボットや自動運転車、360°カメラは魚眼レンズをよく使います。そのため、撮影した映像から実世界の再現環境を作る工程では、視野の端まで使えることが利点になりえます。ただし、実際の現場で使えるかどうかは、コードやモデルの公開内容と自分のデータでの検証次第です。
出典:3dgofish.github.io続きを読む
02ツール
LibreYOLOのドキュメントが、物体1枚の画像から3D Gaussian Splatsを生成するSperidlabs Idolの実行方法を掲載しています。出力は.plyと.splatで、コードと重みの主なライセンスはApache-2.0です。
実務への影響3DGSは通常、多数の写真から再構成します。1枚から生成できれば、ゲームや展示の素材づくりの入口が広がる可能性があります。ただし、これは見えない面を推定して作る生成です。実物を計測する記録の用途とは性格が違うため、材料からは精度の評価はできません。.plyと.splatで出力できるため、既存の3DGSビューアに読み込める点は実務で扱いやすいと考えられます。
出典:libreyolo.com続きを読む
03ツール
speridlabsが、物体1枚の画像から最大約105万個のガウシアンを生成するモデル「Idol」を公開しました。ピークVRAM 7.2GBで、標準的な3DGSのPLYとして出力します。
実務への影響3DGSを1枚の画像から作れるため、ゲームや映像制作で、小物や背景アセットの下書きを作る用途が考えられます。出力は標準の.plyなので、既存の3DGSビューアで開けるとされています。
出典:huggingface.co続きを読む