B站|腾讯B站纷纷入局,虚拟人热火朝天!谁才是真元宇宙入口?( 三 )
B站CEO陈睿在哔哩哔哩周年演讲时提到,在过去的一年里共有超过32000名虚拟主播在B站开播,同比增长40%,虚拟主播已经成为B站直播领域增长最快的品类。
这一切都要归功于研发人员在制造虚拟数字人的两大重要环节——动作捕捉技术和渲染技术上做出的突破。
文章插图
B站虚拟主播分区
1、解构四大动作捕捉方案,最高可实现毫米级误差
如何让虚拟数字人更加生动?动作捕捉方案是其中的关键要点。动作捕捉是指通过数字手段记录现实人们的运动过程。过去的一些科幻电影和游戏中,人们常常通过基于摄像机的动作捕捉系统完成对于一些科幻角色的塑造。同时,动作捕捉系统根据实现原理的不同,可以分成光学动作捕捉、惯性动作捕捉、Track设备+IK算法的动作捕捉、以人工智能为主的动作捕捉方案。
文章插图
光学动作捕捉方案是当动捕演员在特定的部位粘上特殊材料,摄像机通过反光来捕捉这些特殊材料的位置变化,从而完成对演员的动作捕捉。
目前,光学动作捕捉方案能通过高帧率的捕捉,实现毫米级误差精度,能对人物动作还原最为精细,但这类捕捉方案对于背景环境的要求较高,技术门槛也同样较高。
文章插图
光学动作捕捉技术
在光学动作捕捉设备和方案上,国内外都涌现出一些较为优秀的公司代表,比如说影视动捕巨头VICON公司以及国内利亚德集团下的北京虚拟动点科技有限公司。
北京虚拟动点科技有限公司的成立与美国光学巨头公司NaturalPoint离不开关系。利亚德集团在2016年11月4日宣布,计划通过旗下的子公司平达公司,以8.44亿元人民币全资收购了美国光学巨头公司NaturalPoint,同时也收下了其旗下OptiTrack产品系列,随后成立了北京虚拟动点科技有限公司。
OptiTrack的光学动作捕捉方案可以通过两个以上的高速智能摄像头对于移动目标进行定位,并记录相应数据,从而“复现”人物的动作和表情。
据利亚德集团COO、虚拟动点董事长姜毅介绍,当两个人戴上VR眼镜进行传球动作,OptiTrack运动捕捉系统可以及时抓取一人动作,并传送到另一个人的VR眼中,整个传输过程中,OptiTrack实现了高精度、低延迟、以及稳定可靠的传输过程。
而惯性动作捕捉方案,主要是通过人物在各个关键佩戴的惯性传感器,并且对一些主要的部分进行实时测量,是比较主流的动作捕捉方案之一。
我们常见的动作捕捉服、手套等设备都是属于这类惯性动作捕捉范围内。
文章插图
《指环王》动作捕捉演员Andy Serkis
甚至现在也出现了人们通过惯性动作捕捉技术打造一个虚拟数字人来直播带货。
文章插图
卡通形象的虚拟数字人直播带货现场
在惯性动作捕捉的赛道里,国内厂商诺亦腾、国外厂商XSens都拥有比较成熟的产品。其中,诺亦腾通过全身17节点惯性传感器、全身绑带、传感器充电盒以及EVA便携箱等组成部分打造了入门级无线动作捕捉系统Perception Neuron 3。
第三种则是以Track设备+IK算法的动作捕捉方案,主要通过Track设备以及IK算法相结合,模拟出一定的动作姿态。这种动作捕捉方案在一些消费级的产品上运用较多,也颇受硬核技术流玩家们的喜爱,他们可以搭建自己的动作捕捉设备方案。
此前,英国实时动作捕捉技术开发商IKinem也基于这样的模式推出了Orion 2.0产品,该产品通过与不同的硬件设备兼容,实现跟踪数字化身的全身运动轨迹,后来该公司以及其产品线被苹果收购。
- 苹果|马化腾称,腾讯只是一家普通公司,这是谦虚说法还是有所顾虑?
- 百度|马化腾的一句话,腾讯市值一小时暴涨1400亿港币,马云格局还是小了
- 腾讯研究院|构建美好数字社会,腾讯2022科技向善创新周成功举办
- 猪心移植人体成功的背后,站着一位华人女科学家
- meta|一个24小时就会自毁的网站,在网友的接力下存活了两年
- 白白胖胖头顶起雾走走停停安全无误在哈尔滨站候车厅内一边消毒一边在室内移动的智能消毒机器人...|火车站里的机器人服务,是什么体验?
- 腾讯|投出公司的总市值顶两个科创板,腾讯在给哪些企业当“后台”?
- 腾讯|前腾讯员工爆料:鹅厂的末位淘汰制让人心理崩溃!
- 芯片|腾讯立功了,国产芯片迎来好消息,重要程度不亚于华为鸿蒙
- 马化腾|从不大放厥词,马化腾:腾讯随时被替换