0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

人工智能翻译mRASP:可翻译32种语言

ss 来源:陈述根本 作者:陈根 2020-12-01 14:03 次阅读

利用计算机把一种自然语言转变成另一种自然语言的过程就是机器翻译。

机器翻译对于信息时代下海量信息的捕获无疑具有重要作用,事实上,人们对于机器翻译的需求也与日俱增。除了专业的出版水平的翻译,机器翻译还包括以了解信息或以交流信息为目的的机器翻译。

多语言翻译是机器翻译需要面临的一大技术现实。其中,一个理想的模型是一个统一的具备多种语言能力的模型,在遇到新的语言时,临时少量学习即可达到很流利的语言水平。

EMNLP 2020 最新的多语言翻译新范式 multilingual Random Aligned Substitution Pre-training (mRASP)就成功实现了这一理想模型:mRASP通过预训练技术再在具体语种上微调即可达到领先的翻译效果,其在 32 个语种上预训练出的统一模型在 47 个翻译测试集上取得了全面显著地提升。

不同于以往的翻译模式,mRASP树立了翻译的预训练和微调的成功路径。mRASP中的关键思想就是一种新的随机对齐子串技术,它使具有相似意义的单词和短语更接近多种语言的表现空间。研究人员预先训练了32种语言,对联合的mrap模型建立公共数据集。模型就是这样对下游语言对进行微调以获得专门的机器翻译模型。

研究人员在不同环境下对42个翻译方向进行了广泛的实验,包括跨文化的异国语言等。实验结果表明,与传统的mRASP相比,mRASP对训练目标具有显著的性能改进。这也是其第一次验证多个低资源语言对可以用来证明丰富的资源机器翻译,甚至可以提高关于训练前语料库中从未出现过的外来语的翻译质量。

mRASP 主要针对机器翻译任务而设计,它有三个应用优势:

一是打破了资源场景的限制,不论平行双语资源高低都能有所提升。在资源丰富的语言,比如标准英法翻译任务上已经有 4000 万平行语句训练情况下,使用 mRASP 依然能获得显著提升,达到了 44.3 的 BLEU 值。

二是打破了语种数量的限制。任何语言的翻译,无论是孟加拉语到古吉拉特语还是印地语到菲利宾语,只要是地球上的语言,mRASP 都可以直接拿来微调,并且效果可期。

三是资源消耗低。相比于上百张卡的“军备竞赛”预训练玩法,mRASP 更平民,仅需要 8 卡训练一周就可以得到。

随着计算机运算能力的提升和多语言信息资源的爆发式增长,机器翻译技术日益精进,未来还将为普通用户提供更加实时便捷的翻译服务。

责任编辑:xj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1776

    文章

    43839

    浏览量

    230589
  • 机器翻译
    +关注

    关注

    0

    文章

    138

    浏览量

    14793
收藏 人收藏

    评论

    相关推荐

    嵌入式人工智能的就业方向有哪些?

    嵌入式人工智能的就业方向有哪些? 在新一轮科技革命与产业变革的时代背景下,嵌入式人工智能成为国家新型基础建设与传统产业升级的核心驱动力。同时在此背景驱动下,众多名企也纷纷在嵌入式人工智能领域布局
    发表于 02-26 10:17

    ai人工智能机器人

    随着时间的推移,人工智能的发展越来越成熟,智能时代也离人们越来越近,近几年人工智能越来越火爆,人工智能的应用已经开始渗透到各行各业,与生活交融,成为人们无法拒绝,无法失去的一个重要存在
    发表于 09-21 11:09

    《通用人工智能:初心与未来》-试读报告

    作者给出的结论。整体读下来,可以给我们关于通用人工智能全面的了解。作者也反复强调了通用人工智能与专用智能的区别。尤其是人们错误的认为一堆专用智能堆砌起来就是通用
    发表于 09-18 10:02

    自然语言处理和人工智能的区别

      自然语言处理(Natural Language Processing,NLP)是人工智能(AI)中的一个分支,它利用计算机技术对自然语言进行处理,使得电脑能够理解和操作人类语言。自
    发表于 08-28 17:32 928次阅读

    Transformers是什么意思?人工智能transformer怎么翻译

    Transformers是什么意思?transformer怎么翻译人工智能transformer怎么翻译? Transformers是一个包含自然语言处理中的基础技术的深度神经网络。
    的头像 发表于 08-22 15:59 2219次阅读

    人工智能及其应用总结

    的应用。 人工智能的应用 1. 自然语言处理 自然语言处理(NLP)是一种人工智能的应用程序,通过智能计算机程序来进行人类
    的头像 发表于 08-15 16:07 531次阅读

    如何迎接人工智能时代

    第一,了解人工智能的基础知识和技术。人工智能是计算机科学的一个分支,它使用计算机程序模拟人类的思维过程,以达到智能化的目的。人工智能的应用非常广泛,例如自然
    的头像 发表于 08-14 15:10 973次阅读

    人工智能会取代翻译

    在某些场景下,如翻译普通商务文档、新闻报道以及其他非技术性的文章等,机器翻译的正确率已经非常接近人类翻译了。然而,在涉及到一些重要的领域,例如法律、药学甚至是文学等相关领域,机器翻译
    的头像 发表于 08-14 14:29 762次阅读

    人工智能语言是什么

    AI语言可以分为两类:一类是面向专业人士的AI语言,如Python、R、Matlab等,这些语言在科学研究、数据分析、机器学习等领域具有着广泛的应用。另一类是面向普通用户的AI语言,如
    的头像 发表于 08-13 10:33 2536次阅读

    人工智能语言有哪些

    人工智能语言有哪些 人工智能语言是一种编程语言,用于开发和实现人工智能技术。与传统编程
    的头像 发表于 08-12 17:12 2418次阅读

    人工智能用什么语言

    人工智能用什么语言 人工智能(Artificial Intelligence, AI)是指基于计算机的理论和技术,采用模拟智能行为的方法研究与开发
    的头像 发表于 08-12 17:12 2158次阅读

    人工智能学什么语言

    人工智能学什么语言 人工智能(AI)是计算机科学的一个领域,旨在开发机器智能的能力。它是计算机科学中最吸引人的研究领域之一,目前已经引发了广泛的讨论。这也引发了有关
    的头像 发表于 08-12 16:58 442次阅读

    啥是人工智能人工智能难吗?

    ,以实现各种功能和任务,例如图像识别、语音识别、自然语言处理、机器翻译、语音合成、智能推荐等。 AI的发展历程可追溯到二十世纪中叶,但直至近年来人们才开始真正关注和重视这一领域。当今,人工智能
    的头像 发表于 08-12 16:20 599次阅读

    机器翻译研究进展

    机器翻译使用计算机将一种语言翻译成另一种语言,具有低成本、高效率和高翻译质量等优势,在语音翻译
    的头像 发表于 07-06 11:19 414次阅读
    机器<b class='flag-5'>翻译</b>研究进展

    AI 人工智能的未来在哪?

    人工智能、AI智能大模型已经孵化;繁衍过程将突飞猛进,ChatGPT已经上线。 世界首富马斯克认为AI对人类是一威胁;谷歌前CEO施密特认为AI和机器学习对人类有很大益处。 每个国家对核武器的运用有两面性,
    发表于 06-27 10:48