国内首场数字人XR实时直播带货

国内首场数字人XR实时直播带货中，将摄像机跟踪、数字人、动作捕捉、LED大屏、UE5实时渲染等前沿技术或工具，有机结合到了一起。其中凌云光·元客视界自主研发的FZMotion光学运动捕捉系统部署在场地中，保障了现场“中之人”的动作捕捉与真实摄像机的跟踪，是连接虚拟与现实世界的桥梁。FZMotion实时捕捉 “中之人”的动作，并融合面部捕捉与手指捕捉设备，将“中之人”的表情、手指动作、身体动作传递给沐岚并对其进行驱动。直播观众所看到的直播是由多个画面组合而成。一是真实摄像机拍摄到的，包含LED屏上的表演者、基于真实摄像机视角渲染而成的LED屏上画面。二是数字人沐岚，她被以AR前景的方式叠加到了画面一上。当摄像机拍摄到LED屏外的时候，还需要渲染屏外拓展画面，同画面一和二拼接。多个画面虚实融合，呈现给观众。