技术揭秘——Naostage无信标追踪系统引领沉浸式VR视听新纪元 ​

技术揭秘——Naostage无信标追踪系统引领沉浸式VR视听新纪元

Orange Lab实验室

项目目标

本项目旨在通过动态追踪技术实现两大创新：

1. 空间音频实时混音：对移动表演者进行精准定位，实现三维声场动态重构。 

2. 智能灯光追踪系统：基于演员位置数据实现自动化灯光调控。

该技术方案可广泛应用于VR音乐会、体育赛事直播、剧场演出等场景，同时支持杜比全景声、双耳渲染及高阶Ambisonic格式的电视节目与播客制作。该项目对于 VR 现场音乐、体育及戏剧应用具有重要意义。

核心方案

Naostage K SYSTEM无信标追踪系统

● 基于纯视觉的识别技术

● 无需任何物理信标或可穿戴设备

● 支持多目标动态追踪

项目进展

该项目邀请了艺术家 June Caravel 与 Gwendolyne Coronado进行表演，其位置信息被传输至沉浸声服务器进行实时空间化处理，并同步至灯光系统实现自动追踪。

主要流程如下：

1. 系统设置阶段

● 在工作室内部署Naostage K SYSTEM，设备安装高度为 3.50 米，距离源的最小距离为 3 米；

● 通过 OSC 协议将空间坐标数据传输至沉浸声服务器；

● 同步进行VR 360摄像机进行捕捉与Ambisonic音频采集。

2. 制作与录制阶段

● Kariba Productions团队使用12K VR摄像机完成“Ma star à moi”作品的拍摄；

● Virtuel Audio的录音师Eric Munch负责音频录制。

3. 系统集成验证

项目结果正如预期——实时追踪系统非常高效、音频与灯光系统无缝集成。艺术家的追踪数据使实时音频空间化成为可能，无需使用信标，从安装到最终呈现没有任何障碍。此外，Naostage 支持OSC协议，与沉浸声服务器完美协同工作，从而确保声音与灯光系统呈现最佳效果。

Orange Lab 利用Naostage的顶尖的解决方案来增强实时 VR体验，这一项目展示了无信标追踪技术在 VR 现场表演应用中的高效与创新。借助 Naostage 的自动追踪和沉浸声等多项先进前沿技术和专家智慧，观众体验到了无与伦比的沉浸感，为现场表演和 VR 应用开辟了全新可能性。