与朱广权在线battle,百度智能云AI手语主播正式上岗
鞭牛士报道近日 , 一则段子手朱广权与“手语主播”在线pk的视频火了 , 刚刚上线播放量就突破百万 。 视频中 , 朱广权用超快语速的顺口溜挑战“手语主播”的“手速” , 而这位手语主播也凭过硬的专业能力轻松应战 。 事实上 , 这位手语主播不是真人 , 而是一位虚拟数字人 。
文章图片
这位数字人是由“百度智能云曦灵”数字人平台打造的首个AI手语主播 。 她形象亲切自然 , 专业能力出色 , 在刚刚开启的冰雪赛事中 , 百度智能云AI手语主播已经上线 , 为听障用户提供24小时的手语服务 , 让他们也能快捷地获取赛事资讯 。
文章图片
(AI手语主播)
据统计 , 全球约有4.3亿人患中度及以上听力障碍 , 根据全国第二次残疾人抽样调查数据 , 中国有听障人士2780万 。 他们虽然听不到赛场的声音 , 但同样希望感受赛事的精彩 。 AI手语数字人无疑成为了他们观赛的重要桥梁 。
百度集团副总裁吴甜表示:“百度已发布集数字人生产、内容创作、业务配置服务为一体的智能数字人平台——百度智能云曦灵 , 百度希望通过领先的全栈AI能力 , 把虚拟人的生产周期缩短到小时级别 , 降低生产成本 , 并且用AI驱动生成内容 。 ”
研发一款AI手语主播有多难?
手语数字人的本质是在解决翻译问题 。
区别于传统翻译 , 手语翻译的难点在于:手语并非按照语言逐字翻译 , 而需要根据语句整体意思进行语言精炼和语序调整 , 同时还需实时配合表情和唇语 , 帮助听障者更好的理解 。 这就导致AI手语数字人在信息凝练度、低时延和精细化三方面面临极其复杂的技术难题 。 因此 , AI手语主播不仅需要具备高精度的数字人形象 , 还需要具备能够语音识别、手语翻译和手语表达的AI大脑 。
文章图片
(AI手语主播面部细节图)
从外形看 , 对比以往AI主播形象 , 百度智能云打造的AI手语主播不仅高度还原真人发肤 , 且在立体感、灵活度、可塑性上都有大幅提升 。 据悉 , 百度智能云建立了规模庞大的手语动作库 , 基于《国家通用手语词典》规范 , 结合动作捕捉设备和真实手语老师的双向调优 , 精修近1万个手语动作 , 保证了手语表达的动作准确性 。 同时首创4D扫描技术 , 使得AI手语主播表情自然生动 , 口型生成准确度高达98.5% 。
而她的“AI大脑“则依托于百度智能云 。 通过百度自主研发的机器翻译技术 , 百度智能云构建出?套精确的手语翻译引擎 , 可懂度达到85%以上 , 媲美主流的中英、中日等方向的机器翻译结果 , 达到业界领先水平 , 结合百度自研的语音识别技术 , 可将冰雪赛事的文字及音视频内容 , 快速精准的转化为手语;同时再通过专为手语优化的自然动作引擎 , 完成AI手语主播的动作驱动 , 实时演绎为数字人的动作、表情和唇语 。 这保证了AI手语主播具备高可懂度的手语表达能力和精准连贯的呈现效果 。
据了解 , 如此复杂的数字人研发工作 , 百度只用了不到2个月 。 百度方面表示 , 虚拟数字人要为人类提供服务、与人自然地交流 , 需要背后强大的知识体系和对话能力支撑 。 百度知识图谱积累的5500亿知识 , 帮助数字人拥有“自己”的经验和认识去思考 。 基于百度去年发布的百亿参数对话模型PLATO , 虚拟人可以跟用户进行有料、有趣、有情感的交流 。
- 本文转自:文汇报国家速滑馆“冰丝带”是北京冬奥会标志性场馆之一。|科技冬奥:“全项目参赛”背后的中国创新与上海智慧
- 栈桥鸥群自由觅食人来不惊好一幅人与自然和谐相处画面
- 与机器人打乒乓、下五子棋……上海社区里的科技新年欢乐多
- 安卓阵营挑战iPad,华为落寞,三星与苹果仍有较大差距
- 合资公司|软银机器人与爱丽思就机器人业务开展合作,后者投资100亿日元
- Spotify|华为与俄罗斯无线电科学研究所在莫斯科测试5G+设备
- realme|苹果iPhone象征财富与品味?87%美国青年认为如此
- 华为|2022年华为5G再次出手,与俄罗斯无线电研究所测试5G网络设备
- 苹果|苹果将推大屏iMac Pro:设计与24英寸版类似 芯片升级
- 北京冬奥会 | 火炬传过“民族之脊” 多位夏奥冠军参与传递