网易云音乐|深度解读:阿里云视频直播重磅功能升级( 二 )


虚拟直播间 让直播服务能力提升
云端互动虚拟演播室为远程采访、异地互动、虚拟实时制作等场景打造富有沉浸感的演播体验 , 达到专业广电级导播效果 , 并已成功应用在各类大型赛事直播场景中 。 通过云端的多路实时实景抠像、虚拟背景生成与实时动态渲染技术 , 有效解决了主播与嘉宾不在同一空间 , 以及现场环境受限无法进行专业演播的痛点 。 将身处在不同地方的人合成到任意演播厅 , 即便身处千里之外 , 也能透过虚拟演播技术 , 体验沉浸于同一空间的互动感 。

目前 , 演播厅常用的抠图技术大多跟绿幕抠图相关 。 但绿幕抠图存在几个弊端:首先要专门搭建绿幕演播室或者是绿幕设备 , 应用场景受限;同时 , 为了保证绿幕抠图的最佳效果 , 还需要加装灯光设备进行调试 , 甚至需要有拍摄经验或操作者进行提前的布景 。
而阿里云利用AI技术创新对虚拟演播厅的技术方案进行了全面的升级 , 打磨出了全新实景抠像算法和引擎能力 。 首次采用了实景预设背景抠像、多机位切换+实时抠像、最高6路抠像源+抠像合成处理等技术方案 。 为了对标广电级别的节目规格 , 阿里云视频技术团队还尝试了多种的算法以及工程模型 , 提升实景抠像的效果以及长时间直播的稳定性能 , 将实景抠像的效果提升行业领先的水平 。 因此 , 在各种采访环境不可控的杂乱背景下 , 阿里云虚拟演播厅技术均可以处理实现最佳的成像效果 。
阿里云还打通了音视频通信RTC以及全球音视频实时传输网络GRTN , 将多机位、多视角同步直播的技术能力与RTC实时连麦、异地开播等能力进行结合 , 为用户提供了简单稳定的连线功能 , 真正的实现了互动虚拟演播的能力 。
从去年至今 , 互动虚拟演播厅技术方案已被广泛应用到国内各类赛事活动直播中 , 打造了多场沉浸式的直播报道 。 而这一新技术的运用也打破了传统的电视台记者的采访形式 , 即无需要记者再携带摄像团队以及沉重的设备到处奔波 , 更无需以往一定要把记者与受访者设置于同一环境的固有模式 。 通过互动虚拟演播厅采访任务仅需要两部手机加一台电脑 , 即可以随时随地的展开直播与转播 , 同时也让观众们可以在第一时间体验到了更具有沉浸感的播报视感 。

互动虚拟演播厅技术能力升级概括总结如下:
第一 , 对实景抠像打造出了新的算法引擎和极致的效果 , 解决了实景扣像边缘粗糙、抖动等问题 , 并且抠像效果精细到了人物画质真实细腻的效果 , 也促进了产品的可应用性 , 打破了行业实景抠像的壁垒;
第二 , 丰富了业务侧的接入能力 , 实现了实时互动+导播的完整方案 , 打造出了实时互动的场景 。 通过手机APP , 既可以简单便捷的开播 , 让使用门槛大幅度降低;
第三 , 全面升级了云导播的稳定性 , 包括超长时间连麦的稳定性、抠像的稳定性、音视频互动、APP性能、全方位的满足异地多人多场景以及超长时间的连麦和直播需求 。 对于复杂的多场景 , 比如单人切换、双人远景切换、近景直播中插入电片广告等 , 实现了无线无缝的切换 , 真正的达到了广电级级别的节目制作水准 。
这一次全面的技术升级 , 也是将之前的虚拟演播厅升级为具有实时互动、沉浸效果体验的互动虚拟演播厅 。 产品方案也为各类业务和行业带来了直播报道的全新体验 。 从实际的应用场景上来看 , 互动虚拟演播厅不仅高度契合体育竞技国内外赛事类的现场转播 , 远程直播、多主持人解说模式等场景 , 还可以应用于各类行业转播 。