3Dガウシアンスプラッティングとは
3Dガウシアンスプラッティングとは、写真や動画から3D空間を作り、ぼかした粒の集合として高速に描画する技術です。英語では3D Gaussian Splattingと呼ばれます。点群をもとに、位置、大きさ、向き、色、透明度を持つ小さな粒を空間に置き、見た目を再現する設計です。
英語表記:3D Gaussian Splatting
3Dガウシアンスプラッティングの仕組み
InriaのSIGGRAPH 2023プロジェクトでは、カメラ位置推定で得られる疎な点から始め、3D Gaussians、つまり広がりを持つ3Dの粒を最適化する方法が説明されています。各粒はただの点ではなく、楕円体のように広がりを持つ粒です。空間をレゴの面で組むのではなく、半透明の絵の具の粒で描く感覚に近いでしょう。
NeRFとの違い
NeRFはニューラルネットワークに見え方を問い合わせて画像を合成します。3Dガウシアンスプラッティングは、表示しやすい粒の集合として持つため、リアルタイム表示に寄せやすいのが特徴です。論文ページでは、1080pで100fps以上の新視点合成が示されました。閲覧体験の軽さを重視する3D化で名前が出る技術です。
マーケティングでの見方
店舗、ホテル、住宅、展示会、観光地などを、ブラウザやアプリで自由に見せる用途と相性があります。高価な3D制作を毎回行う代わりに、撮影データから空間体験を作る選択肢になるでしょう。売り場や空間そのものが商品になる業種では、検討価値が高い技術です。体験を軽く届けられるかが焦点でしょう。
Topic三角形の面ではなく、ふわっとした粒で描く
3Dガウシアンスプラッティングの「Gaussian」は、位置だけでなく広がりを持つ粒を指します。一般的な3Dモデルのように三角形の面を貼るのではなく、半透明の粒をたくさん重ねて見た目を作ります。写真らしさと表示速度の両立が注目された理由。面ではなく粒で描く3Dです。
3Dガウシアンスプラッティングに関するよくある質問
- 3DガウシアンスプラッティングはNeRFより優れていますか?
- 用途によります。3Dガウシアンスプラッティングはリアルタイム表示に強みがありますが、撮影条件、編集性、データ容量、用途によって向き不向きがあります。
- スマホ動画だけで使えますか?
- 簡易な作成ツールは増えていますが、品質は撮影の枚数、角度、ブレ、明るさに左右されます。商用利用では、撮影設計と権利確認を合わせて考える必要があります。
- 3Dガウシアンスプラッティングはゲーム用3Dモデルですか?
- 一般的なゲーム用ポリゴンモデルとは違います。写真らしい空間表示に向く一方、細かな編集や物理演算には別の3Dデータ形式が必要になることがあります。