0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Lightmatter推出Mars芯片 用光执行神经网络计算

IEEE电气电子工程师 来源:IEEE电气电子工程师学会 作者:IEEE电气电子工程师 2020-09-12 11:55 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

多年来,电气工程师和计算机科学家一直在努力寻找如何更快,更有效地执行神经网络计算的方法。实际上,设计适合神经网络计算的加速器最近已经成为活跃的温床,最常见的解决方案是GPU,它与各种特定于应用的IC(例如Google的 Tensor Processing Unit )和现场可编程门阵列展开竞争。

现在,另一位竞争者刚刚进入了这个竞技场,它基于一种完全不同的范例:光计算。麻省理工学院的一个名为 Lightmatter的分支机构在近日的Hot Chips线上会议上描述了其“ Mars ”设备。Lightmatter不是唯一采用这种新颖策略的公司,但它似乎领先于竞争对手。

不过,我(作者)把这种方法称为“新颖”可能会有点误导大家。事实上,光学计算有着悠久的历史。早在20世纪50年代末,它就被用于处理第一批合成孔径雷达(synthetic-aperture radar,SAR)图像,这些图像是在数字计算机无法完成必要的数学计算任务的时候建造的。这解释了为什么工程师要制造各种各样的模拟计算机,这些模拟计算机基于spinning disks,sloshing fluids,continuous amounts of electric charge甚至光线。

在过去的几十年中,研究人员不时地重新提出了用光来计算事物的想法,但这一概念并没有被证明对任何事物都有广泛的实用性。当涉及到神经网络计算时,Lightmatter正在尝试改变这一现状。Mars装置的核心是一个芯片,该芯片中包括一个模拟光学处理器,专门设计用于执行神经网络基本的数学运算。

这里的关键操作是矩阵乘法,该乘法包括将数字对相乘并相加结果。可以构成光的加法并不奇怪,因为当两束光束结合时,构成光的电磁波会叠加在一起。

更棘手的问题是如何用光来做乘法运算。让我在这里概述一下,当然,如果想了解更全面的描述,我建议阅读Lightmatter在其博客上提供的关于其技术的相关文章。

Lightmatter光学处理器的基本单位是所谓的 Mach-Zehnder干涉仪的装置 。Ludwig Mach和Ludwig Zehnder在19世纪90年代发明了这种设备,所以我们这里所说的并不是完全现代的东西。新的想法是将许多Mach-Zehnder干涉仪缩小到纳米级尺寸,并将它们集成到一个芯片上,以加快神经网络计算的速度。

这种干涉仪将入射光分成两束,然后经过两条不同的路径,将产生的两个光束重新组合。如果两条路径相同,那么输出看起来就像输入。但是,如果两个光束中的一个必须比另一个光束传播得更远或速度减慢,则它会与另一个光束异相。在极端情况下,它可能是完全180度(半波长)的相位不一致,在这种情况下,当重新组合时,两束光束会产生破坏性的干涉,并且输出完全为零。

一般来说,光在输出端的场振幅将是输入端的光振幅乘以在其两臂行进的光之间相位差的一半的余弦。如果你能用一些方便的方法控制相位差,你就有了一个可以进行乘法运算的装置。

Lightmatter的Mach-Zehnder干涉仪是通过在纳米光子芯片中为光形成适当的小波导而构建的。通过使用折射率取决于其所受电场的材料,可以简单地通过施加电压来产生电场来控制分裂光束的相对相位,就像给电容器充电一样。在光物质的芯片中,这是通过在干涉仪的一个臂上施加一个极性的电场,在另一个臂上施加相反极性的电场来实现的。

就像电容器一样,电流仅在电荷积累时流动。一旦有足够的电荷来提供所需强度的电场,就不再有电流流动,因此就不再需要能量。这很重要,因为这意味着一旦你设置了要应用的乘数的值,并且随后该值(神经网络计算中的“权重”)没有变化,则不再需要能量。通过芯片的光流同样不消耗能量。所以这里有一个非常有效的乘法系统,一个以光速运行的系统。

各种模拟计算机的缺点之一是它们可以执行的计算精度有限。这也是Lightmatter芯片的一个缺点——你不能像使用数字电路那样精确地指定数字。幸运的是,神经网络一旦经过训练就可以进行“推理”计算,不需要太多的分辨率。然而,神经网络是可以训练的。“训练需要更高的动态范围;因此,我们专注于推理。”Lightmatter首席执行官兼公司创始人之一 Nicholas Harris表示。“我们有一个8位等效系统。”

你或许会想,Lightmatter革命性的用于用光执行神经网络计算的新设备在现阶段只是一个实验室原型,但这是错误的想法。该公司在生产一种实用的产品方面已经走了相当长的路,它可以被添加到任何一个带有PCI-Express插槽的服务器主板上,并立即编程开始进行神经网络推理计算。Harris说:“我们非常专注于使它看起来不像外星人的技术。” 他解释说,“Lightmatter不仅内置了这种硬件,还创建了必要的软件工具链,以支持将其与标准神经网络框架(TensorFlow和PyTorch)一起使用。

Lightmatter预计将于2021年底投入生产,该公司的Mars设备也将投入商业生产。Harris说,该公司的芯片虽然很精密复杂,但产量很高,这在很大程度上是因为所涉及的纳米光子组件与切割中所发现的相比并没有那么小边缘的电子设备。因此,保持高收益率和低价格的Mars设备应该不难与GPU竞争。

谁知道呢,也许其他公司,例如 Lightintelligence , LightOn , Optalysis 或 Fathom Computing ,届时将推出他们自己的基于光的神经网络加速器卡。不过,Harris并不为此担心 -- 我们遥遥领先。

原文标题:Lightmatter研发Mars芯片 能以光速执行神经网络计算

文章出处:【微信公众号:IEEE电气电子工程师学会】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    463

    文章

    54423

    浏览量

    469295
  • SAR
    SAR
    +关注

    关注

    3

    文章

    448

    浏览量

    48058
  • 神经网络
    +关注

    关注

    42

    文章

    4842

    浏览量

    108177

原文标题:Lightmatter研发Mars芯片 能以光速执行神经网络计算

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    为什么 VisionFive V1 板上的 JH7100 中并存 NVDLA 引擎和神经网络引擎?

    我想知道为什么 VisionFive V1 板上的 JH7100 中并存 NVDLA 引擎和神经网络引擎,请问?您能否举一些关于他们的用例的例子?
    发表于 03-25 06:01

    面向嵌入式部署的神经网络优化:模型压缩深度解析

    1.为什么需要神经网络模型压缩? 神经网络已经成为解决复杂机器学习问题的强大工具。然而,这种能力往往伴随着模型规模和计算复杂度的增加。当输入维度较大(例如长时序窗口、高分辨率特征空间)时,模型需要
    的头像 发表于 02-24 15:37 5451次阅读
    面向嵌入式部署的<b class='flag-5'>神经网络</b>优化:模型压缩深度解析

    神经网络的初步认识

    日常生活中的智能应用都离不开深度学习,而深度学习则依赖于神经网络的实现。什么是神经网络神经网络的核心思想是模仿生物神经系统的结构,特别是大脑中神经
    的头像 发表于 12-17 15:05 460次阅读
    <b class='flag-5'>神经网络</b>的初步认识

    自动驾驶中常提的卷积神经网络是个啥?

    在自动驾驶领域,经常会听到卷积神经网络技术。卷积神经网络,简称为CNN,是一种专门用来处理网格状数据(比如图像)的深度学习模型。CNN在图像处理中尤其常见,因为图像本身就可以看作是由像素排列成的二维网格。
    的头像 发表于 11-19 18:15 2246次阅读
    自动驾驶中常提的卷积<b class='flag-5'>神经网络</b>是个啥?

    NMSIS神经网络库使用介绍

    NMSIS NN 软件库是一组高效的神经网络内核,旨在最大限度地提高 Nuclei N 处理器内核上的神经网络的性能并最​​大限度地减少其内存占用。 该库分为多个功能,每个功能涵盖特定类别
    发表于 10-29 06:08

    在Ubuntu20.04系统中训练神经网络模型的一些经验

    本帖欲分享在Ubuntu20.04系统中训练神经网络模型的一些经验。我们采用jupyter notebook作为开发IDE,以TensorFlow2为训练框架,目标是训练一个手写数字识别的神经网络
    发表于 10-22 07:03

    CICC2033神经网络部署相关操作

    在完成神经网络量化后,需要将神经网络部署到硬件加速器上。首先需要将所有权重数据以及输入数据导入到存储器内。 在仿真环境下,可将其存于一个文件,并在 Verilog 代码中通过 readmemh 函数
    发表于 10-20 08:00

    液态神经网络(LNN):时间连续性与动态适应性的神经网络

    1.算法简介液态神经网络(LiquidNeuralNetworks,LNN)是一种新型的神经网络架构,其设计理念借鉴自生物神经系统,特别是秀丽隐杆线虫的神经结构,尽管这种微生物的
    的头像 发表于 09-28 10:03 1563次阅读
    液态<b class='flag-5'>神经网络</b>(LNN):时间连续性与动态适应性的<b class='flag-5'>神经网络</b>

    【「AI芯片:科技探索与AGI愿景」阅读体验】+神经形态计算、类脑芯片

    AI芯片不仅包括深度学细AI加速器,还有另外一个主要列别:类脑芯片。类脑芯片是模拟人脑神经网络架构的芯片。它结合微电子技术和新型
    发表于 09-17 16:43

    神经网络的并行计算与加速技术

    随着人工智能技术的飞速发展,神经网络在众多领域展现出了巨大的潜力和广泛的应用前景。然而,神经网络模型的复杂度和规模也在不断增加,这使得传统的串行计算方式面临着巨大的挑战,如计算速度慢、
    的头像 发表于 09-17 13:31 1297次阅读
    <b class='flag-5'>神经网络</b>的并行<b class='flag-5'>计算</b>与加速技术

    基于神经网络的数字预失真模型解决方案

    在基于神经网络的数字预失真(DPD)模型中,使用不同的激活函数对整个系统性能和能效有何影响?
    的头像 发表于 08-29 14:01 3667次阅读

    无刷电机小波神经网络转子位置检测方法的研究

    摘要:论文通过对无刷电机数学模型的推导,得出转角:与三相相电压之间存在映射关系,因此构建了一个以三相相电压为输人,转角为输出的小波神经网络来实现转角预测,并采用改进遗传算法来训练网络结构与参数,借助
    发表于 06-25 13:06

    神经网络专家系统在电机故障诊断中的应用

    摘要:针对传统专家系统不能进行自学习、自适应的问题,本文提出了基于种经网络专家系统的并步电机故障诊断方法。本文将小波神经网络和专家系统相结合,充分发挥了二者故障诊断的优点,很大程度上降低了对电机
    发表于 06-16 22:09

    神经网络RAS在异步电机转速估计中的仿真研究

    众多方法中,由于其结构简单,稳定性好广泛受到人们的重视,且已被用于产品开发。但是MRAS仍存在在低速区速度估计精度下降和对电动机参数变化非常敏感的问题。本文利用神经网络的特点,使估计更为简单、快速
    发表于 06-16 21:54

    基于FPGA搭建神经网络的步骤解析

    本文的目的是在一个神经网络已经通过python或者MATLAB训练好的神经网络模型,将训练好的模型的权重和偏置文件以TXT文件格式导出,然后通过python程序将txt文件转化为coe文件,(coe
    的头像 发表于 06-03 15:51 1504次阅读
    基于FPGA搭建<b class='flag-5'>神经网络</b>的步骤解析