iXR OSC & NDI는 NDI를 통해 360도 영상을 수신하고, OSC를 통해 손 좌표를 전송합니다.
Workflow
1. 노트북을 사용하여 실시간 인터랙티브 멀티미디어 콘텐츠를 만듭니다.
2. Vision Pro와 노트북을 동일한 Wi-Fi 네트워크에 연결합니다.
3. Vision Pro에서 OSC를 통해 손 추적 데이터를 수신하고, 필요에 따라 interaction을 추가합니다.
4. 콘텐츠를 equirectangular panoramic image로 렌더링합니다.
5. NDI를 통해 Vision Pro로 콘텐츠를 전송합니다.
6. 파노라마 이미지의 배경색이 rgba(0, 0, 0, 0)일 경우, 주변 환경이 표시됩니다.
7. 가상 환경이 배경에 표시될 경우, 주변 환경은 표시되지 않습니다.
Note
4096 x 2048 비디오 해상도를 사용하는 것이 권장됩니다. 4096 x 2048의 360도 비디오를 NDI를 통해 전송하려면 빠른 무선 라우터가 필요합니다. DECO BE11000으로 테스트한 결과 아주 약간의 지연이 있었습니다.
TouchDesigner
이 튜토리얼에서는 TouchDesigner를 사용하여 실시간 인터랙티브 멀티미디어 콘텐츠를 만듭니다. 샘플 프로젝트 파일은 GitHub에서 다운로드할 수 있습니다.
프로젝트 파일에 HDRI 파일이 포함되어 있지 않습니다. HDRI 파일을 가져와 주세요.
TouchDesigner 프로젝트를 열고 IP 주소와 포트를 설정하세요.
NDI 소스를 선택하세요.
Start 버튼을 누르세요!
