スプラットの作成
Gaussian Splatsは、フォトグラメトリから再構築された3Dシーンです。このフォトグラメトリは、写真やビデオから抽出された個々のフレームである場合があります。また、例えばBlenderのような3Dパッケージによって画像がレンダリングされる「合成」である場合もあります。
フォトグラメトリを取り込んだら、それを3D Gaussian Splatに変換できる状態になります。このプロセスは、主に2つのステップに分けられます。
- Structure from Motion (SfM): 入力画像が分析され、元のカメラポーズが推定され、初期の3D点群が作成され、シーン内のキーポイントが特定されます。
- トレーニング: アルゴリズムは、数千回のイテレーションにわたって以下を実行します。
- スプラットを追加：より詳細が必要な領域に
- スプラットを削除：大きく貢献しないスプラットを
- スプラットのパラメータを調整：入力画像により良く一致させるため