Looking Glass Musubi用 3DGS動画作成アプリ

English Version


info このアプリについて

本アプリは、Looking Glass社の新しいフォトフレーム「Musubi」に最適化した、3Dガウシアンスプラッティング(3DGS)モデルから回転・往復動画を作成するWEBアプリです。ブラウザ上で完結するため、インストール不要でPC・Macどちらでも利用できます。

💡 Musubiの仕組み: 「Musubi」は、3Dフレームに見せるレンチキュラーシートの上に透明LCDを重ねて、そこに2Dの動画を再生するフォトプレーヤーです。動画の明度の高い部分は透過して背後の3Dフレームが透けて見えるため、2D動画があたかも3Dのように見えるという仕組みです。

star 主な特長

  1. Musubi最適化の解像度で動画保存: 縦長576×1024ピクセル固定でmp4を書き出すため、そのままMusubiで再生できます。
  2. 背景色を自由に設定: 3DGSモデルの背景色をお好みの色に変更できます。明度の高い色ほど3Dっぽく見えます(Musubiの透過LCDがより多く透けるため)。
  3. SHARPモデル向けの調整機能: AppleのSHARPで2D写真から作成した3DGSモデルは回転中心がずれていることがありますが、Z位置スライダーで被写体中心に合わせられます。さらに白ボーダーで周囲を縁取りすることで3D効果を引き出せます。
  4. USB転送するだけで再生: 保存した動画ファイル(.mp4)は、USB接続したMusubiに転送するだけで自動的に再生されます。

file_open 3DGSファイルの開き方

以下のいずれかの方法でファイルを読み込めます:

  1. ツールバーの一番左にあるフォルダアイコン folder_open を押し、メニュー内の「ファイルを開く」から3DGSファイルを選択する。
  2. 3DGSファイルをブラウザのビューワー上に直接ドラッグ&ドロップする。

対応フォーマット: .ply / .splat / .ksplat / .spz / .sog

📂 複数ファイルの鑑賞: どちらの方法でも複数のファイルを同時に選択可能です。複数開いた場合は、ツールバーの arrow_backarrow_forward(前へ/次へ)ボタンでモデルを切り替えられます。

touch_app マウス・タッチの操作

操作 マウス タッチ
視点の回転 ドラッグ スクロール(1本指)
視点の平行移動 Shift + ドラッグ 2本指スクロール
拡大 / 縮小 ホイール回転 ピンチ(つまむ)
UI表示の切替 クリック タッチ

※ツールバーやスライダーを素早く表示/非表示にするには、画面上をクリックまたはタッチしてください。右下の tune ボタンでも表示/非表示を切り替えられます。

apps ツールバーの機能

アイコン機能
folder_open 3DGS 「ファイルを開く」(複数選択可)と「.spz保存」(読み込んだモデルを軽量な.spz形式に変換して保存)。
palette 背景色 カラーピッカーで自由に背景色を選べるほか、 のプリセット(初期色/白/グレー/黒/グリーンスクリーン/ブルースクリーン)をワンクリックで選択できます。選んだ色は次回起動時も記憶されます。
arrow_back / arrow_forward 複数ファイルを開いているときに、前後のモデルへ切り替え。
fullscreen Full フルスクリーン表示のON/OFF。
play_arrow 自動再生 「水平回転」「水平往復」「垂直往復」「楕円回転」の4種類のカメラアニメーションと「停止」を選択。
radio_button_checked 録画 録画の開始/停止。詳細は次章「動画の保存とMusubiへの転送」を参照。

tune スライダー調整

スライダー範囲説明
白ボーダー 0 〜 100 レンダリング画面の周囲を白くフェードさせて縁取ります。アルファブレンドで内側に向かうほど元の映像が透けて見えるようになっており、Musubiで見たときの3D効果を強調できます。0で無効(縁取りなし)。
Z位置 −3.0 〜 +3.0 モデルの前後(Z軸)位置を調整します。特にAppleのSHARPで作成した3DGSモデルは被写体中心がZ方向にずれていることが多いため、このスライダーで回転中心が被写体に合うよう調整してください(目安:−1.5〜−2.0付近)。

restart_alt ボタンで両スライダーを初期値(0)にリセットできます。

movie 動画の保存とMusubiへの転送

📼 Musubiでの再生方法: 保存した.mp4ファイルを、USB接続したMusubi本体に転送するだけで再生できます。特別な変換作業は不要です。

keyboard キーボード操作

Enterフルスクリーン切替
A自動アニメーションの切替(水平回転→水平往復→垂直往復→楕円回転→停止)
白ボーダーの調整
Z位置の調整
0スライダーのリセット
Space次のファイルに切り替え
Back Space前のファイルに切り替え

photo_camera 2D写真から3DGSモデルを作る(Apple SHARP)

お手持ちの2D写真から3DGSモデルを生成したい場合は、Appleの「SHARP」を使う方法がおすすめです。WindowsではOnnxSharp、MacではMLSharpというツールを使うことで、2D写真から3DGSモデルを生成できます。

📖 詳しい生成方法はこちら:
https://stereo.jpn.org/jpn/depth/index.html

content_cut 3DGSモデルの高度な編集(Super Splat)

風景全体が含まれる3DGSモデルから、特定のターゲットのみを抽出するなどの高度な編集を行いたい場合は、WEBアプリ「Super Splat」がおすすめです。トリミングや不要な点群の削除、位置・角度の調整などをブラウザ上で行えます。

🔧 Super Splat エディタ:
https://superspl.at/editor