小冰|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了

中新网客户端北京10月24日电(采访人员 宋宇晟)今年9月,“就读”于清华大学的虚拟人华智冰公开了一条弹唱歌曲视频,引发网友讨论。
这段38秒的视频中,一个女孩儿在抱着吉他弹唱。这段无比真实的画面上方字幕却显示,其中的女孩儿是个“虚拟人”。
小冰|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章插图
短视频截图当时,许多网友惊讶于,虚拟人已经能做到如此真实了。不过此后有网友发现,这段弹唱视频还存在一个“真人版”。有网友进而质疑,虚拟人华智冰弹唱的视频只是对B站某up主真人拍摄视频进行了换脸。
其中应用的技术只是“AI换脸”吗?除此之外视频中还有哪些前沿科技?这又和其他“虚拟偶像”的短视频有何不同?采访人员进行了采访调查。
“华智冰”这三个字,作为虚拟人的名字出现在公众视野,是从今年6月开始的。
6月1日,由北京智源人工智能研究院、智谱AI与小冰公司共同“培养”的人工智能学生华智冰,进入清华“学习”。当时公开的相关资料及视频就在社交媒体引起了网友热议。
小冰|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章插图
2021年6月公开的华智冰影像。智源大会供图三个多月后,小冰团队公开了一段带有华智冰形象的弹唱视频。
根据小冰公司发布的声明,在该视频中,人物的面部特征,包括人脸、表情、口型等,全部由人工智能小冰框架X Avatar生成并进行融合;视频中的人物肢体、动作,包括手持吉他弹唱,来源于小冰团队成员录制的原始视频模板;视频中的歌声,由人工智能小冰框架X Studio生成。
不过,网上有人将其解读为仅仅是应用了“AI换脸”技术。在小冰团队看来,其中的技术与“AI换脸”有着本质区别。
10月19日,小冰公司发布的说明指出,该视频隶属于小冰发布会中的超写实视频生产线产品。新的产品化技术实现了完全虚拟生成不存在的面部及声音技术。
但华智冰也并非只是“换了个假脸”。
这份说明同时指出,即使是视频中的面部置换,也并非仅仅AI换脸。以往的技术只能实现真实人类之间的面部替换,且精度不足,不足以实现内容级的视频生产。此外,采访人员了解到,该视频中的歌声也都是由人工智能“创作”生成的。
小冰|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章插图
华智冰正面照。小冰团队供图那么,相比于我们平时在短视频平台刷到的有着“二次元风”的“虚拟偶像”作品,华智冰的这条短视频所应用的技术有何不同?
“现在大家在短视频平台上看到的绝大多数‘虚拟偶像’,跟人工智能半毛钱关系都没有。他们应用的是动作捕捉技术。”在小冰公司首席执行官李笛看来,华智冰及其背后的小冰框架,和那些“虚拟偶像”有着本质上的不同。
【 小冰|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了】采访人员向多位“虚拟偶像”相关行业人士求证,也得到类似的答案。
简而言之,大多数短视频中有着二次元风格的“虚拟偶像”,更多是通过动作捕捉的方式,将人的动作、面部表情转化为二次元风格的视频作品。
虽然看起来是虚拟的,但在其背后,存在一个实实在在的人。而这些“虚拟偶像”所做的动作、反应,都与其背后的人一致。
但华智冰不是。
这就需要说到另一个问题:如果通过动作捕捉可以让视频中的人看起来是“虚拟”的,我们为什么还要对人工智能进行研发呢?
答案关乎成本。
就在9月,第九代小冰发布。其中推出的“小冰短视频内容封装管线”,大大降低了短视频生产成本。