iXR OSC & NDI チュートリアル

iXR OSC & NDIは、NDIを介して360度ビデオを受信し、OSCを通じて手の座標を送信します。

ワークフロー

ノートパソコンを使用してリアルタイムのインタラクティブなマルチメディアコンテンツを作成します。
Vision Proとノートパソコンを同じWi-Fiネットワークに接続します。
Vision ProからOSCを通じて手のトラッキングデータを受信し、必要に応じてインタラクションを追加します。
コンテンツを正距円筒図法のパノラマ画像(equirectangular panoramic image)でレンダリングします。
コンテンツをNDI経由でVision Proに送信します。
パノラマ画像の背景色がrgba(0, 0, 0, 0)の場合、周囲の環境が表示されます。
バーチャル環境が背景に表示される場合、周囲の環境は表示されません。

4096 x 2048のビデオ解像度を使用することが推奨されます。4096 x 2048の360度ビデオをNDI経由で送信するには、高速なワイヤレスルーターが必要です。DECO BE11000でテストした結果、若干の遅延がありました。

TouchDesignerを使用する場合

このチュートリアルでは、TouchDesignerを使用してリアルタイムのインタラクティブなマルチメディアコンテンツを作成します。サンプルプロジェクトファイルはGitHubからダウンロードできます。


プロジェクトファイルにHDRIファイルが含まれていません。HDRIファイルをインポートしてください。"

TouchDesignerプロジェクトを開き、IPアドレスとportを設定します。



NDIソースを選択してください。


Startを押してください!