手语|朱广权迎手语新搭档？百度智能云AI手语主播正式上岗

近日，一则段子手朱广权与“手语主播”在线pk的视频火了，刚刚上线播放量就突破百万。视频中，朱广权用超快语速的顺口溜挑战“手语主播”的“手速”，而这位手语主播也凭过硬的专业能力轻松应战。事实上，这位手语主播不是真人，而是一位虚拟数字人。

文章插图

这位数字人是由“百度智能云曦灵”数字人平台打造的首个AI手语主播。她形象亲切自然，专业能力出色，在刚刚开启的冰雪赛事中，百度智能云AI手语主播已经上线，为听障用户提供24小时的手语服务，让他们也能快捷地获取赛事资讯。

文章插图

文章插图

（AI手语主播）
据统计，全球约有4.3亿人患中度及以上听力障碍，根据全国第二次残疾人抽样调查数据，中国有听障人士2780万。他们虽然听不到赛场的声音，但同样希望感受赛事的精彩。AI手语数字人无疑成为了他们观赛的重要桥梁。
百度集团副总裁吴甜表示：“百度已发布集数字人生产、内容创作、业务配置服务为一体的智能数字人平台——百度智能云曦灵，百度希望通过领先的全栈AI能力，把虚拟人的生产周期缩短到小时级别，降低生产成本，并且用AI驱动生成内容。”
研发一款AI手语主播有多难？手语数字人的本质是在解决翻译问题。
区别于传统翻译，手语翻译的难点在于：手语并非按照语言逐字翻译，而需要根据语句整体意思进行语言精炼和语序调整，同时还需实时配合表情和唇语，帮助听障者更好的理解。这就导致AI手语数字人在信息凝练度、低时延和精细化三方面面临极其复杂的技术难题。因此，AI手语主播不仅需要具备高精度的数字人形象，还需要具备能够语音识别、手语翻译和手语表达的AI大脑。
【手语|朱广权迎手语新搭档？百度智能云AI手语主播正式上岗】
文章插图

（AI手语主播面部细节图）
从外形看，对比以往AI主播形象，百度智能云打造的AI手语主播不仅高度还原真人发肤，且在立体感、灵活度、可塑性上都有大幅提升。据悉，百度智能云建立了规模庞大的手语动作库，基于《国家通用手语词典》规范，结合动作捕捉设备和真实手语老师的双向调优，精修近1万个手语动作，保证了手语表达的动作准确性。同时首创4D扫描技术，使得AI手语主播表情自然生动，口型生成准确度高达98.5%。
而她的“AI大脑“则依托于百度智能云。通过百度自主研发的机器翻译技术，百度智能云构建出?套精确的手语翻译引擎，可懂度达到85%以上，媲美主流的中英、中日等方向的机器翻译结果，达到业界领先水平，结合百度自研的语音识别技术，可将冰雪赛事的文字及音视频内容，快速精准的转化为手语；同时再通过专为手语优化的自然动作引擎，完成AI手语主播的动作驱动，实时演绎为数字人的动作、表情和唇语。这保证了AI手语主播具备高可懂度的手语表达能力和精准连贯的呈现效果。
据了解，如此复杂的数字人研发工作，百度只用了不到2个月。百度方面表示，虚拟数字人要为人类提供服务、与人自然地交流，需要背后强大的知识体系和对话能力支撑。百度知识图谱积累的5500亿知识，帮助数字人拥有“自己”的经验和认识去思考。基于百度去年发布的百亿参数对话模型PLATO，虚拟人可以跟用户进行有料、有趣、有情感的交流。