晓查发自凹非寺量子位报道 | 公众号 QbitAIFacebook AI（bush...|Meta发布支持128种语言的新语音模型：指向元宇宙跨语种交流( 二 ) 晓查发自凹非寺

此外XLS-R也让低资源语言与英语之间的翻译大幅改进，例如从印度尼西亚语到英语的翻译，其中BLEU（双语互译质量评估）的准确性平均翻了一番。
CoVoST-2语音翻译基准测试中， XLS-R在21个英语翻译方向上比之前技术平均提高了7.4BLEU 。
从下图中可以看出， XLS-R对低资源语种的提升尤为明显。

文章图片
微调XLS-R
XLS-R只是一个预训练模型，为了能更好地服务于具体任务，还需要对模型进行微调。
HuggingFace官方提供了详细的微调教程。

文章图片
此外官方还提供不同参数规模的语音识别模型，以及15种语言与英语之间的互译模型，供用户下载。
传送门
官方博客：
https://ai.facebook.com/blog/xls-r-self-supervised-speech-processing-for-128-languages/
GitHub页：
https://github.com/pytorch/fairseq/tree/main/examples/wav2vec/xlsr
论文地址：
https://arxiv.org/abs/2111.09296v1
试用网页地址：
https://huggingface.co/spaces/facebook/XLS-R-2B-22-16
微调方法简介：
https://huggingface.co/blog/fine-tune-xlsr-wav2vec2
—完—
量子位QbitAI·头条号签约
来源：量子位

晓查 发自 凹非寺量子位 报道 | 公众号 QbitAIFacebook AI（bush...|Meta发布支持128种语言的新语音模型：指向元宇宙跨语种交流( 二 )

晓查发自凹非寺量子位报道 | 公众号 QbitAIFacebook AI（bush...|Meta发布支持128种语言的新语音模型：指向元宇宙跨语种交流( 二 )