014D
アリゾナ州立大学NEMが、ゲンロック不要でローリングシャッターを補正する4DGSパイプラインを公開しました。高速な動きで学習を厚くする手法により、速い場面のPSNRが約2.5dB上がったと報告しています。
実務への影響ボリュメトリック撮影は、ゲンロック対応の専用カメラを揃えるため、機材費が障壁になりがちでした。Open4DGSは、この要件を映像側の推定で補うことを狙っています。大学の研究室、小規模な制作会社、舞台・ライブ系の実験的な取り組みでは、手持ちの民生カメラで検証しやすくなる可能性があります。\n\nまた、ローリングシャッターによる歪みは、ダンスなど速い動きの撮影で目立つ問題です。補正をパイプライン内で扱う設計は、4D撮影を試す制作者にとって参考になります。\n\n一方、日本の実務で使えるかは、ライセンス条件、必要なGPU環境、自分の機材での再現性しだいです。まずは小規模な撮影で、同期推定が成功するか(タイムコードのみの基準へ戻らないか)を確認するのが現実的です。ビューアやデータ形式が既存の3DGS系ツールとどう接続できるかも、導入前に調べる点になります。
出典:open4dgs.asunemlabs.com続きを読む
02研究
Bocconi大学やTUMなどの研究チームが、物体が分裂・結合する一人称視点動画を扱う4DGS手法Topo-4DGSと評価用ベンチマークTopoEgoを発表しました。コードとデータは公開予定です。
実務への影響調理や組み立てのように、人が物の形を変える作業の動画を4Dで再構成する用途で、技術的な前提が見直される可能性があります。論文はこの課題を、身体性を持つAI(embodied AI)にとって重要だと位置づけています。ロボットが人の作業動画から動作を学ぶ研究や、作業手順の記録・解析などでの活用が想定される分野です。ただし、これらは材料に書かれた応用ではなく、あくまで読み手側の見立てです。\n\nベンチマークが公開されれば、トポロジー変化を含む4DGSを共通条件で比べる土台になります。現時点でコードもデータも出ていないため、実務での試用はできません。
出典:arxiv.org ほか1件続きを読む
03研究
Tengfei Wang氏らがUAV斜め画像から建物単位で3DGSを並列学習し、軽量メッシュを作る手法SemLite-GSをarXivで公開しました。コードも公開されており、全体シーン方式より建物再構成の時間を短縮できるとしています。
実務への影響材料から確認できるのは論文の主張の範囲です。都市の空間分析に使う軽量な建物モデルを、UAV斜め撮影から効率よく作る方向の研究で、都市モデル、測量、インフラ周辺のデジタルツインなどで関心を集めそうです。
出典:arxiv.org続きを読む
04ツール
Blender 5.3で読み込んだ3Dガウシアンスプラットを、シーンのライトで照らし直したり、切り抜きや発光演出を加えたりするアドオンです。Superhiveで12.99ドル、ライセンスはGPLと表示されています。
実務への影響3DGSをBlenderで映像やCG合成に使う制作者にとって、スキャンデータの不要部分の整理から演出までを同じ環境で試せる選択肢になります。標準的な3DGS .plyで書き出せるため、SuperSplat、Postshot、Unrealなど他のビューアやツールとの行き来も想定されています。ただし性能や品質は、材料からは確認できません。
出典:superhivemarket.com続きを読む