虚拟现实现场制作解决方案助力虎牙《电波之夜》真人与虚拟形象同台互动直播

  • Home
  • 虚拟现实现场制作解决方案助力虎牙《电波之夜》真人与虚拟形象同台互动直播

虚拟现实现场制作解决方案助力虎牙《电波之夜》真人与虚拟形象同台互动直播


8月21日,虎牙直播跨次元节目《电波偶像X》的收官盛典《电波之夜》完美落幕。这次的《电波之夜》以AR直播作为核心概念,以三国剧情为故事主线,云集了业内多位知名声优,搭配虎牙平台游戏星秀头部主播及最受欢迎的虚拟形象,真人与虚拟主播共同出镜。此次晚会,不仅是虎牙虚实结合领域多项技术的一次集中展示,更重要的是创造了游戏发行的新模式和巨大想象空间。


图片
图片


8月21日,虎牙直播跨次元节目《电波偶像X》的收官盛典《电波之夜》完美落幕。这次的《电波之夜》以AR直播作为核心概念,为了将虚实结合的视觉效果做到极致,虎牙利用Cgangs V3D虚拟现实实时制作解决方案,通过IS4.0+Unreal虚拟渲染系统以及强大的播控功能,实现虚拟场景复杂光影渲染效果、场景人物精确追踪,虚拟IP与真人主播虚实同台互动交流,打破物理界限为观众呈献一场视觉的豪华大餐。


图片


在场景处理上,此次晚会则实现了3A级场面大场景,Cgangs V3D虚拟现实实时制作解决方案提供实时光线跟踪、PBR照片级渲染技术为整个虚拟场景提供更精确的渲染。实时光线跟踪可以模拟各种光学效果,例如反射和折射,散射和色散。实时阴影投射以及桌面地面模糊反光特效,极大的增强了虚拟场景的真实感。PBR照片级渲染技术提供了更准确和可预测的结果,并且可以很好地适应动态光照条件。本次晚会利用该功能制作出恢弘炫酷的舞台效果,视觉体验极具冲击力。


图片
图片
图片
图片

在人物形象处理上,利用Cgangs V3D虚拟现实实时制作解决方案的7路输入以及外置色键器获得最惊艳的画面质量。能够实现发丝级色键抠像处理、和真实世界光照光源景深位置处理。Cgangs V3D虚拟现实实时制作解决方案支持3D Presenter,对抠像后的视频图像立体化,让主持人在整个场景中显得更加真实。

图片


此次采用了无轨和有轨跟踪的混合应用,无轨特写两个机位,有轨跟踪全景两个机位一台Cgangs V3D系统可以实现多机位处理能力

图片
有轨跟踪

图片
无轨跟踪

Ultimatte 12色键器和Ultimatte Smart Remote 4完成抠像。利用Ultimatte Smart Remote键控在节目制作过程中实时精修和调整边缘,让真实物体在虚拟场景中真实地融入在一起。


图片


Cgangs V3D虚拟现实实时制作解决方案提供多种虚拟阴影特效,包括投射阴影,交互阴影,以及地面阴影。阴影不仅可以投射在地面上,任何虚拟物体以及人物之间都可以产生交互阴影。自动镜头虚焦,提供多个参数调节,更好的模拟了景深以及焦外虚化等效果。

图片
虚拟人物solo产生交互阴影

图片


图片

虚拟主持人+虚拟场景+光学动作捕捉

虚拟主持人利用一套光学动捕系统,这套系统捕捉到的实时数据和模型可以直接接入到工业级游戏引擎Unreal Engine 4里面,Cgangs V3D虚拟现实实时制作解决方案深度整合Unreal Engine 4,可以直接读取Unreal Engine 4的工程,所以这个虚拟人物就可以直接进到Cgangs V3D虚拟现实实时制作解决方案中,通过同时调用虚拟场景与动捕人物以及相应的数据和插件,实现虚拟人物在舞台上表演精的确匹配,使其完全与实际场地进行结合,确保虚拟主持人在正确的时间出现在正确的位置。