外贸与经营
Google翻译添加对梵文等24种语言的支持
阅读提示
费用、政策与平台规则可能调整,实际操作请以官方现行规定为准。
问题 1:Google 翻译此次添加了多少种语言支持?
Google 翻译此次添加了 24 种语言的支持,使所能翻译的语言类别达到 133 种。
问题 2:这 24 种语言中最受欢迎和最少使用的分别是什么?最受欢迎的是拥有 5000 万使用人口的 Bhojpuri,最少的则是只有 2 万人仍在使用的梵文。
问题 3:全球大约有多少人口使用这 24 种语言?全球大约有 3 亿人口使用这 24 种语言,除了 Bhojpuri 有 5000 万人口使用外,非洲约有 4000 万人口使用 Lingala,非洲的埃塞俄比亚及肯尼亚有 3700 万人口使用 Oromo,北印有 3400 万人口使用 Maithili,印度东北方有 2500 万人口使用 Assamese。
问题 4:Google 为什么要开发专门的神经语言识别模型来添加这些语言的翻译能力?- 这些冷门语言缺乏数字资料,且语言识别模型品质不佳难以从网络上搜集。
- 机器翻译模型通常需要在大量平行翻译文本上进行训练,而这些语言缺乏这类资料,所以需要开发新方法。
- 先是针对超过 1000 种语言训练了一个基于 Transformer 的半监督 LangID 模型,利用 MASS 强化任务并过滤资料集。
- 用权衡文本重要性的开源 TF-IIF 项目过滤资料集,去除高资源语言句子,并开发特定语言过滤器移除异常。
零资源翻译做法是指既无平行翻译文本也没有特定语言翻译例子,除了单语文本外,模型搭配所有丰富资源语言平行翻译文本训练翻译能力,并通过 MASS 让模型自单语文本学习语言表示方法,从而训练出支持 1138 种语言的大型翻译模型。
问题 7:Google 对这些新纳入语言的未来计划是什么?Google 指出未来将持续改善相关模型,让这些冷门语言的翻译效果足以媲美西班牙文或德文。