0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

创建混合神经网络的未来

倩倩 来源:雷锋网,上海市大数据股 作者:雷锋网,上海市大 2021-03-15 17:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

深度学习是一个很大的领域,其核心是一个神经网络算法,神经网络的尺寸由数百万甚至数十亿个不断改变的参数决定。似乎每隔几天就有大量的新方法提出。

然而,一般来说,现在的深度学习算法可以分为三个基础的学习范式。每一种学习方法和信念都为提高当前深度学习的能力和范围提供了巨大的潜力和兴趣。

混合学习-现代深度学习方法如何跨越有监督和无监督学习的界限,以适应大量未使用的未标记数据?

成分学习-如何采用一种创新的方法将不同的组件链接起来生成一个混合的模型,这个模型的效果比各个部分简单的加和效果要好?

简化学习-如何在保持相同或规模的预测能力的同时,减少模型的大小和信息流,以达到性能和部署的目的?

深度学习的未来主要在于这三种学习范式,每一种都紧密链接。

近日,由英、意,瑞三国联合创建的一个混合神经网络诞生了,其特殊之处在于使用互联网将信号从生物神经元传输到人工神经元。这可谓是神经电子连接技术研究上的一重大突破,未来有望在我们的大脑与互联网之间建立起连接,实现大脑可以与数据实时交互。当然,这一概念从科学研究到实践运用还需要长时间的探索,不如先从本周英国南安普敦大学发表的科学研究来一窥混合神经网络背后的原理。

该研究是从老鼠身上培养的生物神经元,并可以通过一种类似生物突触的元件将信息传递给人工神经元,反之亦然。这项研究的所有三个要素:人工神经元、生物神经元和突触部分位于世界的不同地方,通过互联网连接起来。

在自然界,大脑通过一个庞大的神经元网络来运作,神经元通过电信号将信息发送到其他神经元,这些信号被单独称为“动作电位”(action potential)。神经元之间相接触的部位(这种信号在上面传输)名为突触。神经元只能沿一个方向发送信息。信号将通过一个神经元传送到输出端。信息通过突触传输,刺激接收端的下一个神经元,依此类推。

生物神经元是从大鼠身上培养的,精心组织后植入到了苏黎世大学和苏黎世联邦理工学院的一个电极阵列上。借助精巧完善的实验室技术,可以发送来自这些神经元的电信号,并接收捕获的信号。

人工神经元是在意大利帕多瓦大学研发的,被排列在硅微芯片上。就像生物神经元一样,人工神经元能够发送并接收可以读取和测量的信号。在南安普敦大学,科学家们使用了忆阻器(能够传递电荷的微型电路部件)来制造物理器件,这种器件的作用是将信息从生物神经元传递到人工神经元,反之亦然。因而得到的人工突触被称为synpator。由于神经元之间输入和输出的差异,构造了两个单独的人工突触来完成电路,一个代表大脑到硅片,另一个代表硅片到大脑。这两个人工突触中使用的尖端纳米技术方面的细微差异导致了一条单向电路。从这个意义上说,该系统模仿大脑,信息只能沿一个方向通过其各自的系统来传输。

创建混合神经网络的未来

由于需要揭露人类思维的奥秘,因此我的哲学基础促使我在技术,技术之前接受了心理分析,心理学和神经科学方面的培训。我致力于研究人类的思想,而没有忽视作为硬件和计算开发人员多年的技术技能。

对我来说,人类是如此强大,以至于他从一开始就具有克服自己的能力和利用技术的优势。火的发现,砂轮,用于制造工具的材料的处理是技术进步,与我们今天开发的技术一样重要。显然,我们必须将每个人都定位在他的时代,但是全人类的进步和成功故事的规模是毋庸置疑的。

这些进步之一已经在科学环境中应用了不到一年,并且涉及到混合神经网络的创建。

我们认为脑功能是可能的,因为神经元回路是通过微观但高度复杂的连接(称为突触)发生的。

在这个新概念中,科学家能够创建一个混合神经网络,位于世界各地的生物和人工神经元可以通过Internet相互通信。使用尖端的纳米技术开发出人工突触的核心之后,这种交流才成为可能。

这个复杂的项目是在不同的欧洲国家开发的,每个项目分别负责该项目的不同部分。

该研究分为几个部分。意大利是负责培养啮齿动物神经元的国家,而瑞士则负责创建人工神经元。另一方面,在英国,正在开发它们之间进行通信的过程,通过对发达的纳米电子突触进行精细控制的配置来构成虚拟实验室。

尽管这是一个初期且简化的过程,但对于科学来说是巨大的进步。在这个项目中,有可能通过互联网将信息从生物神经元传输到人工神经元,也可以反向传输。

这些第一步是神经电子互联网发展的关键。现在,研究人员预计,他们的方法将激发人们对一系列科学学科的兴趣,并加快神经接口研究领域的创新和科学进步的步伐。尤其是,无缝链接全球不同技术的能力是迈向这些技术民主化的一步,从而消除了协作的重要障碍。

另一方面,它为更复杂的混合网络的研究打开了大门,该网络可用于人类,以弥补某些缺陷,即为交换大脑和计算机之间的相互作用创造平台。脑部功能失调。由AI芯片生成复杂的混合神经网络。显然,鉴于研究的现状,这将是一个有点未来主义的全景图,但是到目前为止所取得的成就开辟了一系列可能性。

(雷锋网,上海市大数据股份,互联网分析沙龙网综合整理)

责任编辑:lq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 神经网络
    +关注

    关注

    42

    文章

    4844

    浏览量

    108212
  • 模型
    +关注

    关注

    1

    文章

    3831

    浏览量

    52289
  • 神经元
    +关注

    关注

    1

    文章

    369

    浏览量

    19204
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    为什么 VisionFive V1 板上的 JH7100 中并存 NVDLA 引擎和神经网络引擎?

    我想知道为什么 VisionFive V1 板上的 JH7100 中并存 NVDLA 引擎和神经网络引擎,请问?您能否举一些关于他们的用例的例子?
    发表于 03-25 06:01

    神经网络的初步认识

    日常生活中的智能应用都离不开深度学习,而深度学习则依赖于神经网络的实现。什么是神经网络神经网络的核心思想是模仿生物神经系统的结构,特别是大脑中神经
    的头像 发表于 12-17 15:05 490次阅读
    <b class='flag-5'>神经网络</b>的初步认识

    自动驾驶中常提的卷积神经网络是个啥?

    在自动驾驶领域,经常会听到卷积神经网络技术。卷积神经网络,简称为CNN,是一种专门用来处理网格状数据(比如图像)的深度学习模型。CNN在图像处理中尤其常见,因为图像本身就可以看作是由像素排列成的二维网格。
    的头像 发表于 11-19 18:15 2279次阅读
    自动驾驶中常提的卷积<b class='flag-5'>神经网络</b>是个啥?

    CNN卷积神经网络设计原理及在MCU200T上仿真测试

    数的提出很大程度的解决了BP算法在优化深层神经网络时的梯度耗散问题。当x&gt;0 时,梯度恒为1,无梯度耗散问题,收敛快;当x&lt;0 时,该层的输出为0。 CNN
    发表于 10-29 07:49

    NMSIS神经网络库使用介绍

    NMSIS NN 软件库是一组高效的神经网络内核,旨在最大限度地提高 Nuclei N 处理器内核上的神经网络的性能并最​​大限度地减少其内存占用。 该库分为多个功能,每个功能涵盖特定类别
    发表于 10-29 06:08

    在Ubuntu20.04系统中训练神经网络模型的一些经验

    本帖欲分享在Ubuntu20.04系统中训练神经网络模型的一些经验。我们采用jupyter notebook作为开发IDE,以TensorFlow2为训练框架,目标是训练一个手写数字识别的神经网络
    发表于 10-22 07:03

    CICC2033神经网络部署相关操作

    在完成神经网络量化后,需要将神经网络部署到硬件加速器上。首先需要将所有权重数据以及输入数据导入到存储器内。 在仿真环境下,可将其存于一个文件,并在 Verilog 代码中通过 readmemh 函数
    发表于 10-20 08:00

    液态神经网络(LNN):时间连续性与动态适应性的神经网络

    1.算法简介液态神经网络(LiquidNeuralNetworks,LNN)是一种新型的神经网络架构,其设计理念借鉴自生物神经系统,特别是秀丽隐杆线虫的神经结构,尽管这种微生物的
    的头像 发表于 09-28 10:03 1602次阅读
    液态<b class='flag-5'>神经网络</b>(LNN):时间连续性与动态适应性的<b class='flag-5'>神经网络</b>

    神经网络的并行计算与加速技术

    随着人工智能技术的飞速发展,神经网络在众多领域展现出了巨大的潜力和广泛的应用前景。然而,神经网络模型的复杂度和规模也在不断增加,这使得传统的串行计算方式面临着巨大的挑战,如计算速度慢、训练时间长等
    的头像 发表于 09-17 13:31 1334次阅读
    <b class='flag-5'>神经网络</b>的并行计算与加速技术

    基于神经网络的数字预失真模型解决方案

    在基于神经网络的数字预失真(DPD)模型中,使用不同的激活函数对整个系统性能和能效有何影响?
    的头像 发表于 08-29 14:01 3697次阅读

    无刷电机小波神经网络转子位置检测方法的研究

    摘要:论文通过对无刷电机数学模型的推导,得出转角:与三相相电压之间存在映射关系,因此构建了一个以三相相电压为输人,转角为输出的小波神经网络来实现转角预测,并采用改进遗传算法来训练网络结构与参数,借助
    发表于 06-25 13:06

    神经网络专家系统在电机故障诊断中的应用

    摘要:针对传统专家系统不能进行自学习、自适应的问题,本文提出了基于种经网络专家系统的并步电机故障诊断方法。本文将小波神经网络和专家系统相结合,充分发挥了二者故障诊断的优点,很大程度上降低了对电机
    发表于 06-16 22:09

    神经网络RAS在异步电机转速估计中的仿真研究

    众多方法中,由于其结构简单,稳定性好广泛受到人们的重视,且已被用于产品开发。但是MRAS仍存在在低速区速度估计精度下降和对电动机参数变化非常敏感的问题。本文利用神经网络的特点,使估计更为简单、快速
    发表于 06-16 21:54

    基于FPGA搭建神经网络的步骤解析

    本文的目的是在一个神经网络已经通过python或者MATLAB训练好的神经网络模型,将训练好的模型的权重和偏置文件以TXT文件格式导出,然后通过python程序将txt文件转化为coe文件,(coe
    的头像 发表于 06-03 15:51 1542次阅读
    基于FPGA搭建<b class='flag-5'>神经网络</b>的步骤解析

    AI神经网络降噪算法在语音通话产品中的应用优势与前景分析

    的语音保真度以及更低的延迟,能够有效应对复杂噪声场景。本文将探讨AI神经网络降噪在语音通话产品中的核心优势,并分析其未来发展趋势和市场前景
    的头像 发表于 05-16 17:07 2000次阅读
    AI<b class='flag-5'>神经网络</b>降噪算法在语音通话产品中的应用优势与前景分析