0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

脑电波翻译成句子错误率低于3%,实现专业级转录

独爱72H 来源:镁客网 作者:镁客网 2020-04-02 16:25 次阅读

(文章来源:镁客网)

在脑机接口赛道上,此前国内清华大学脑机接口实验室曾经让人们成功通过外接设备实现“脑电波打字”,浙大团队也借助颅内脑机接口设备让中风患者控制机械臂做到喝可乐等。而现在,最新《自然·神经科学》的一篇论文显示了脑机接口领域的一项新突破,来自美国加州大学旧金山分校的神经外科教授Edward Chang及其同事,让机器能够将脑电波信号直接翻译为文字语句,意味着人不张口就能“说出”心中所想。

在Edward Chang的研究中,他们分别将用以检测癫痫的电极植入到4名受试者的颅内,这些电极会将他们大声读出句子时的神经活动记录下来。之后,这些记录会被添加到一个循环神经网络中,继而将规律性出现的神经特征表现出来,该特征可能与言语的重复性特征(元音、辅音或发音器官接受的指令等)相关。紧接着,另一个循环神经网络将进行逐字解码,最后形成一段句子。

Edward Chang及团队在文中介绍称,他们通过该机器翻译方法解码并转换神经活动的错误率低至3%,已经能够媲美于专业级言语转录。此外他们在实验过程中还发现,如果利用某人的神经活动和言语对循环网络进行预训练后,再在另一名实验者身上进行训练,最终的解码结果会有所改善,这意味着这一方法在不同人员之间或将实现转移。

可以预见,当这一成果被用于临床,那些失语者以及中风患者等群体,将能够借助脑机接口技术重新正常发声,在不开口的前提下,摆脱手语等辅助表达。另外,如果再配以一个搭载自然语言处理技术的扬声器系统,该类群体也能够通过语音实现交流。

脑机接口是前沿科研之一,不仅吸引了Facebook等企业和资方的关注,也成为创业热门领域之一。就在前不久,马斯克的脑机接口创业公司Neuralink已经取得了新的突破,发布了“脑后插管”的新技术,声称能够通过一台神经手术机器人,像微创眼科手术一样安全无痛地在脑袋上穿孔,并向颅内植入芯片

具体到研究项目,“脑电波转换成文字”是重点领域之一,涉及两个研究方向,一个方向专注于控制,另一个方向专注于转换。在“控制”这一赛道上,团队会在与脑机接口系统连接的电脑中设置一个输入法,继而利用神经网络算法对受试者颅内电极所捕捉的脑电波信号进行解析和转换,让受试者能够实现“脑电波打字”,通过控制键盘输入来表达自己内心所想。

只不过,相比于人们自然交流的语速,这类通过大脑控制打字的方法显得非常低效。相比于“控制”,“转换”在难度上则高得多。包括马金团队在内,诸如Facebook等企业和高校团队也在致力于这方面的研究,意图通过神经网络算法,将颅内电极所捕捉的信号直接解码并转换为文字或语音。

在速度上,这类方法有可能达到人类正常水平。就在Edward Chang及团队于去年发布的一个研究成果中,他们已经让AI能够以每分钟150个词的速度将人类的脑电波转换成语言。从临床意义上来看,这类脑机接口技术对部分群体带来的利好是肉眼可见的。而在更广范围内,“脑电波转换成文字”能够带来的效益远不止于此。

智能家居为例,从最初的手动开关到现在的语音交互,这一场景下的控制方式已经从动手变成动口。但在更多人所畅想的场景中,他们甚至已经不想再动口,而是希望当自己脑海中出现某一个念头的时候,脑机接口系统能够将信号转换为机器可理解的文字,继而所涉及的家电等设备主体能够在时间上无缝衔接,执行人们脑海中的指令。

不过这里需要注意的是,目前的脑机接口研究项目中,在获取脑电波信号环节,研究员们所采取的措施还是以颅内电极为主。

不可否认,这一方式能够更为精准的获取脑电波信号,从而方便接下来的信号解码和转换等。不过,就商业落地而言,虽然这类技术取得的成果是有目共睹的,但是诸如安全、伦理等问题也是事实存在的,距离更大范围应用还有很长的路。相比之下,更多创业公司选择外接脑机接口设备,牺牲部分准确性,提高安全性。随着脑机接口技术不断取得突破,并寻找到可落地场景,想必脑机接口将迎来新一波热度。

(责任编辑:fqj)

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器翻译
    +关注

    关注

    0

    文章

    138

    浏览量

    14794
  • 脑电波
    +关注

    关注

    0

    文章

    51

    浏览量

    16854
收藏 人收藏

    评论

    相关推荐

    GERBER配置转录

    cadence GERBER 配置转录
    发表于 03-07 14:23 0次下载

    求一种基于TRIZ理论的操控台模块锁紧机构设计方案

    TRIZ是俄文Teoriya Resheniya Izobreatatel-skikh Zadatch的缩写,意思是发明问题解决理论,翻译成英文是Theory of Inventive Problem Solving[1-3],汉语译作“萃智”。
    的头像 发表于 02-29 14:16 191次阅读
    求一种基于TRIZ理论的操控台模块锁紧机构设计方案

    影响AI生态系统的七大主要趋势

    过去,计算机只能在人类语言首先被翻译成代码后才能理解。但通过使用NLP,机器能够在文本保持其自然状态的情况下获取智能。
    的头像 发表于 01-31 12:30 873次阅读
    影响AI生态系统的七大主要趋势

    Linux Kernel(armv8-aarch64) 的原子操作的底层实现

    通常我们代码中的`a = a + 1`这样的一行语句,翻译成汇编后蕴含着 3 条指令
    的头像 发表于 10-16 11:14 272次阅读

    如何使用模仿患者声音的计算机程序将文本重新翻译成语音

    的新记录,带来了前所未有的将大脑信号翻译成句子的能力——速度接近正常语音,词汇量超过1000个单词。这些进步为那些不能说话的人提供了以接近对话水平的速度进行交流的能力,甚至展示了如何使用模仿患者声音的计算机程序将文本重新翻译成
    的头像 发表于 09-04 11:33 571次阅读
    如何使用模仿患者声音的计算机程序将文本重新<b class='flag-5'>翻译成</b>语音

    Visium空间转录组和单细胞转录组的区别

    空间转录组云平台是SBCToolBox的一个VIP模块,包括了数据的输入、预览、类群的展示、差异计算、降维可视化、基因在空间位置表达的可视化、常见的小提琴图、山脊图、热图、DotPlot展示、亚群
    的头像 发表于 08-30 10:48 1524次阅读
    Visium空间<b class='flag-5'>转录</b>组和单细胞<b class='flag-5'>转录</b>组的区别

    NeuroVR脑电波VR传感器 脑机接口模组

    脑电波应用
    的头像 发表于 08-23 15:00 453次阅读
    NeuroVR<b class='flag-5'>脑电波</b>VR传感器 脑机接口模组

    了解 ADC 代码错误率

    随着高速模数转换器(ADC)采样率的提高,ADC输出数据中的代码错误(也称为闪烁代码)问题也随之增加。代码错误定义为ADC输出代码中的错误超过定义的阈值。阈值通常定义为误差超过ADC噪声预期幅度
    的头像 发表于 08-17 15:09 651次阅读
    了解 ADC 代码<b class='flag-5'>错误率</b>

    虚拟地址翻译物理地址的流程有哪些呢?

    现代的操作系统将可执行文件加载后,创建了进程,进程中每一条指令和数据都被分配了一个虚拟地址,CPU获取到这个虚拟地址后,需要翻译成内存的物理地址后,才能访问指令和数据
    的头像 发表于 08-14 10:30 570次阅读
    虚拟地址<b class='flag-5'>翻译</b>物理地址的流程有哪些呢?

    脑电波传感器:连接思维与科技的桥梁

    思知瑞科技 金牛座 脑电波传感器模组 简介: 脑电波传感器是一种先进的技术装置,能够测量和记录人类大脑发出的电活动信号。通过采集和解读这些信号,脑电波传感器为我们提供了一扇窥探大脑内部活动的窗口
    的头像 发表于 07-25 10:25 913次阅读
    <b class='flag-5'>脑电波</b>传感器:连接思维与科技的桥梁

    机器翻译研究进展

    机器翻译使用计算机将一种语言翻译成另一种语言,具有低成本、高效率和高翻译质量等优势,在语音翻译、同声传译自动化等许多领域得到广泛应用。 随着双语语料库的不断建设和完善,基于语料库的机器
    的头像 发表于 07-06 11:19 420次阅读
    机器<b class='flag-5'>翻译</b>研究进展

    人工智能计算范式和理论总结趋势

    传统的语音到文本的翻译是通过语音识别和文本机器翻译的串联实现。这个方法的缺点是推理过程中的错误会累加。ConST 可以直接将英语的语音翻译成
    发表于 06-07 11:35 438次阅读
    人工智能计算范式和理论总结趋势

    设计模式:解释器设计模式

    Java解释器是一种将Java程序翻译成机器可执行代码的工具。
    的头像 发表于 06-06 11:22 519次阅读

    新型定量微流控装置用于促进轴突转录组分析

    微流控装置是研究神经元轴突mRNA定位和翻译的有力工具。除了轴突的特定操作和测量外,微流控装置还用于收集轴突以进行轴突转录组分析。
    的头像 发表于 06-02 16:49 742次阅读
    新型定量微流控装置用于促进轴突<b class='flag-5'>转录</b>组分析

    深入浅出学习eTs之在线翻译功能实现

    本章节我们来制作中文翻译成英文的实例(运行在HarmonyOS上),通过HTTP去配合API进行实现
    的头像 发表于 05-13 13:30 459次阅读
    深入浅出学习eTs之在线<b class='flag-5'>翻译</b>功能<b class='flag-5'>实现</b>