MMS论文中关于语种识别的内容摘要
- 前言
- 语种识别相关内容
- 实验结论
前言
摘要翻译一些内容。
论文地址请看这里
语种识别相关内容
- Whisper支持LID,可以区分99种不同的语言;
- 有人使用wav2vec 2.0实现LID,数据集中包含10种亚洲语言;
- Tjandra等人证明,跨语言自监督模型可以通过使用专有数据集训练26种语言的语言识别模型来提高语言识别性能。
- Babu等人使用VoxLingua-107数据集对预训练模型进行微调,以对107种语言进行LID;
- MMS将语言数量扩展到4000多种。
我们通过微调MMS(1B)预训练模型进行语言识别来训练模型。这是通过在预训练的模型上堆叠一个线性分类器来实现的,该分类器映射到集合为特定任务选择可能的语言,然后微调所有参数,包括预训练模型。
实验结论
MMS的确好一些。
但ASRL、SpeechBrain,AmberNet也都还不错,还需要再比较一下模型大小。