详解XR虚拟演播厅技术及厂家

详解XR虚拟演播厅技术及厂家

XR用到的技术简化来说主要包括：摄影机追踪系统、虚拟演播室软件平台、媒体服务器、实时渲染引擎、LED显示屏等。

从1998年的电影《罗拉快跑》开始，游戏行业就潜移默化地影响渗透着影视、新媒体行业，甚至改变着观众的审美习惯，使现代人习惯于游戏式的快节奏和更具带入感的主观运动镜头。主流游戏引擎（Unity 3D、Unreal）的开发者也野心勃勃地进军游戏行业之外的领域，例如动画电影、演出等。专门为舞台演出服务的实时渲染引擎也开始出现（例如Notch）。

虚拟场景一般都是在虚幻引擎（Unreal Engine）或Notch引擎中预制的。之前，需要在例如C4D、maya等DCC软件中建模，导入引擎，添加灯光和纹理，设置动画并提前做好交互测试。

从引擎的偏好上看，Notch能提供更好的动态粒子实时表现，适合VJ等高动态抽象视觉项目，或单独用于XR的前景AR特效的制作。而Unreal更偏向于制作具象复杂的场景，拥有更多封装好的工具及插件进行辅助，能够快捷地打造逼真的效果。

由于虚拟演播技术日趋多样和复杂，三维实时预览、立体投影（3D Mapping）、实时交互特效、多媒体文件的播控等功能开始通过服务器进行整合，不同功能的硬件设备可以和服务器进行无缝衔接。

在XR的虚拟项目上，国内外主要用到的是Disguise服务器及平台，其媒体服务器相当于真实世界与虚拟世界的桥梁，将虚拟摄影机与真实摄影机运动信息进行匹配并将图像信息映射到LED屏幕上，并在范围外进行拓展。其功能还包括摄影机及镜头校正、空间映射、颜色校正，并支持Unreal、Unity、Notch等渲染引擎。

在追踪设备的选择上，与绿幕虚拟制作类似，设备及服务供应商包括： Mo-sys、 Stype、 BlackTrax、 Optitrack、 Xsens 等，分为主动式和被动式红外光学捕捉，其追踪数据和定位调整都可以整合到媒体服务器上。

除了Disguise提供的虚拟演播软件，团队也可以采用其他品牌的虚拟演播室软件平台方案，比如Pixotope、Zero Density、Brain Storm等。

其中Pixotope解决方案主要被用于大型的广播、体育赛事、电子竞技等直播领域，例如“超级碗”、英雄联盟决赛现场、欧洲电视网等。

Pixotope是一个开放式的软件解决方案，用于快速创建虚拟演播室、增强现实及实时图形。它拥有功能强大的商业硬件，专门设计来用于与其他合作商的技术及外部数据源进行连接。Pixotope和Zero Density一样，都是基于虚幻引擎的原生虚拟演播室软件解决方案。

例如，在韩国仁川举行的拳头公司RiotGames2018年英雄联盟世界锦标赛开幕式上，虚拟偶像K/DA女团通过Pixotope提供的技术完美演绎了逼真的AR舞曲《Pop Star》，吸引了包括现场观众外超过9000万的在线观看。

在LED品牌的选择上，目前包括《曼达洛人》《登月第一人》《西部世界》等众多电影、影视剧或短片都主要采用了国产品牌ROE（雷迪奥）的LED产品，比如Black Pearl系列和Diamond系列，其LED点距从2.6mm到5.2mm不等，根据摄影机到LED面板的距离来具体选择。此外，国内厂商ShowHo（秀狐）的LED“影”系列XR-LED显示屏也是众多虚拟发布会、影视综艺节目的首选。