0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

视觉感知突破性光学传感器模仿人类视网膜,有望带来 AI 重大进展

工程师邓生 来源:雷锋网 作者:付静 2020-12-13 10:12 次阅读

视觉、听觉、嗅觉、味觉、触觉是人类最基本的五种感觉,其中视觉极为关键,毕竟随着物种进化,眼睛作为人类最为精细、复杂的器官,感知能力无与伦比。

曾有神经科学、认知心理学研究表明,80% 以上的外界信息都是通过视觉进入了我们的大脑。

技术代代革新之下,仿人眼的尝试不断涌现。

2015 年,美国明尼苏达州一位名为 Allen Zderad 的 68 岁男子在失明 10 年之后,凭借一双 “仿生眼”重见光明。

2020 年 5 月,香港科技大学范智勇团队联合加州大学伯克利分校、美国劳伦斯伯克利国家实验室的一组研究人员,就视网膜问题提出了最新方案,甚至打造出了多项性能超越人眼的仿生眼。

而就在近日,美国公立研究型大学俄勒冈州立大学(Oregon State University)在光学传感器领域有了重大进展,更接近于人眼感知视野变化能力的传感器终于来了。

俄勒冈州立大学表示:

该传感器是图像识别、机器人人工智能等领域的重大突破,突破性的仿人眼光学传感器是人工智能发展的关键一步。

打造新型视网膜传感器

2020 年 12 月 8 日,相关研究成果正式发表于《应用物理快报》,题为 A perovskite retinomorphic sensor(一种钙钛矿型视网膜传感器),论文作者为俄勒冈州立大学工程学院研究员、电气与计算机工程助理教授 John Labram 和研究生 Cinthya Trujillo Herrera。

哪怕最先进的超级计算机,复杂程度也无法与人脑相媲美。

最早,基于这一事实,神经形态计算领域的研究开始兴起,其设计目的是在执行机器学习任务时优于传统计算机,原理可以简要概括为一句话:将人脑(的一些方面)复制到硬件中。

论文介绍,虽然近年来这一领域取得了很大的进展,但几乎所有提供给神经形态处理器的输入信号仍然是为传统的 von Neumann 计算机体系结构设计的。

研究团队设计了一个简单的光敏电容器,并描述了它对光刺激的反应。

如下图 a 所示,该结构基于双层电介质:

底部为二氧化硅:二氧化硅高度绝缘,并且对光基本上没有反应。

顶部为钙钛矿:即甲基铵碘化铅(MAPbI3),这是一种具有大光电导响应的化合物,在光照下介电常数有显著变化,是电介质的理想候选材料,在光照下可以改变电容

电极方面:

底部电极是高掺杂的硅,用作衬底。

顶部电极是 15nm 的、通过热蒸发沉积的金,被设计得足够薄,即便接触电阻很大,在导电时能对光照半透明。

John Labram 表示:

以前尝试制造仿人眼设备(视网膜视觉传感器)都是依靠软件或较为复杂的硬件。但我们设计的这种新型传感器,其操作包括在基础设计中,涉及了钙钛矿半导体的超薄层。当置于光下时,钙钛矿会从坚固的电绝缘体变为导体,它具有发展太阳能的潜力,近年来对于钙钛矿,学界也有着广泛的研究。

基于上述结构,当与外部电阻器串联时,电阻器两端的电压降(又称电位差)将在电容器充电 / 放电时暂时出现尖峰,然后恢复到其平衡值。也就是说,传感器会在照度变化时出现尖峰,在其他时候输出零电压(如上图 d 所示)。

研究团队设计的光敏电容器在设计和预期的用途上,都与别的科学团队以前研制的光电电容器不同——光电电容器被设计用来储存来自太阳辐射的能量,而上述传感器被设计用来检测神经形态计算中光学刺激的变化。

模仿人眼感知更加逼真

那么上述传感器实际的仿人眼效果如何呢?

首先,研究人员通过播放视频作为施加给传感器的光学刺激,模拟大型阵列。

结果表明:

对应视频的静止部分,传感器输出了较暗的视频;

对应视频的移动部分,传感器则输出了较亮的视频。

在没有光照的情况下缓慢移动时,传感器输出的较亮区域存在 “鬼影”效应。

可见,传感器对于动态图像有着很明显的反应。

随后,研究人员向传感器施加了以特定角度排列的光刺激,作为另一种检验。

这一实验受到了 20 世纪 50、60 年代一项发现的启发——科学家们注意到猫的某些神经元对以特定角度排列的光刺激有强烈的反应。科学家们认为,这是视网膜中一些细胞的特定排列导致了超极化、去极化,它们对光学刺激会产生反应。

因此,研究人员选择测量两个值:电容器两端的电压降(C 传感器)和电阻器两端的电压降(R 传感器)。

结果如上图所示,这种传感器的确会对某个方向的刺激做出更强烈的反应。

上述两项实验表明,这一传感器的人眼感知模仿能力的确较强。

不仅如此,研究人员还认为,由于这是一种传感器,它不需要任何复杂的读出算法或后处理,它可直接输出电压,电压取决于传感器所瞄准的物体的方向。

John Labram 表示:

新型传感器将与神经形态计算机完美匹配,将为下一代人工智能的应用提供动力,如自动驾驶汽车、机器人技术和先进的图像识别。

责任编辑:PSY

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    26558

    浏览量

    264229
  • 光学传感器
    +关注

    关注

    8

    文章

    220

    浏览量

    59961
  • 视网膜
    +关注

    关注

    0

    文章

    34

    浏览量

    12705
  • 视觉感知
    +关注

    关注

    0

    文章

    38

    浏览量

    3125
收藏 人收藏

    评论

    相关推荐

    未来已来,多传感器融合感知是自动驾驶破局的关键

    巨大的进展;自动驾驶开始摒弃手动编码规则和机器学习模型的方法,转向全面采用端到端的神经网络AI系统,它能模仿学习人类司机的驾驶,遇到场景直接输入传感
    发表于 04-11 10:26

    泰凌微电子、谷歌与和众科技的Matter联合项目取得重大进展

    近日,Telink(泰凌微电子)、Google(谷歌)、HooRii Technology(和众科技)共同参与的Matter联合项目宣布取得重大进展。在单台MatterOTBR设备下,成功挂载了超过100台Matter over Thread设备,这一数字相较于之前的限制有了巨大的提升。
    的头像 发表于 02-26 09:27 560次阅读

    Zinn Labs 推出基于 PROPHESEE事件视觉传感器的视线跟踪系统,为 AI 智能镜框和 VR/MR 系统赋能

    结合  Prophesee 超低功耗、低延迟的事件视觉传感器, 该款突破性的 视线 跟踪系统将 助力 带来直观、无缝 流畅 的 新 用户体验   Zinn Labs 宣布推出业内首款基
    的头像 发表于 02-07 13:53 336次阅读
    Zinn Labs 推出基于 PROPHESEE事件<b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>的视线跟踪系统,为 <b class='flag-5'>AI</b> 智能镜框和 VR/MR 系统赋能

    AI突破与融合:2024年中国智能技术的新纪元

    随着人工智能领域的不断突破,2024年注定将成为中国智能技术发展的一个新纪元。当下,AI技术不仅在理论研究上取得了重大进展,其在商业应用、社会服务等领域的融合也日益深入。本文将结合近期网络上的
    的头像 发表于 01-03 15:41 288次阅读
    <b class='flag-5'>AI</b>的<b class='flag-5'>突破</b>与融合:2024年中国智能技术的新纪元

    光学视觉传感器技术研究进展

    视觉传感人类感知外界、认知世界的主要途径,研究表明人类获取的外界信息大约有80%来自于视觉
    的头像 发表于 11-27 09:50 730次阅读
    <b class='flag-5'>光学</b><b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>技术研究<b class='flag-5'>进展</b>

    传统基于帧的图像传感器输出和基于事件的视觉传感器输出对比

    (EVS)。这两款专为工业设备设计的传感器实现了业界最小(相比其它堆叠式基于事件的视觉传感器)的4.86 μm像素尺寸,并且只有在感知到场景变化时才会进行捕捉记录。   01 事件相机
    的头像 发表于 11-16 10:12 1103次阅读
    传统基于帧的图像<b class='flag-5'>传感器</b>输出和基于事件的<b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>输出对比

    北理工在室温运行中波红外探测器研究方面取得突破性进展

    北京理工大学郝群教授团队在室温运行中波红外探测器研究方面取得突破性进展,相关论文于2023年1月发表于光学顶刊Light:Science & Applications,获得封面论文。近日该论文入选ESI高被引。
    的头像 发表于 11-14 09:43 307次阅读
    北理工在室温运行中波红外探测器研究方面取得<b class='flag-5'>突破性</b><b class='flag-5'>进展</b>

    德国批准博世、英飞凌、恩智浦入股台积电新厂,东北师范大学研发仿生自适应光传感器

    ,并能很好地模拟人眼的视觉适应行为。 这项成果既丰富了当前神经形态器件的种类,也促进了视网膜仿生器件的发展,有望成为仿生视觉系统中感知端的重
    的头像 发表于 11-10 08:36 352次阅读
    德国批准博世、英飞凌、恩智浦入股台积电新厂,东北师范大学研发仿生自适应光<b class='flag-5'>传感器</b>

    2023数字视网膜技术创新大讲堂:深开鸿探索智慧城市应用实践之路

    10月25日,2023数字视网膜技术创新大讲堂在深圳拉开帷幕。活动分为上午的“数字视网膜技术创新大讲堂
    的头像 发表于 10-26 08:34 585次阅读
    2023数字<b class='flag-5'>视网膜</b>技术创新大讲堂:深开鸿探索智慧城市应用实践之路

    研发突破性的纳米级电子“纹身”传感器可以附着在单个细胞上

    传感新品 【美国约翰霍普金斯大学:研发突破性的纳米级电子“纹身”传感器可以附着在单个细胞上】 研究人员发明了一种纳米级电子“纹身”传感器,它可以附着在一个活的细胞上,而不会损坏它。这一
    的头像 发表于 08-09 08:47 466次阅读
    研发<b class='flag-5'>突破性</b>的纳米级电子“纹身”<b class='flag-5'>传感器</b>可以附着在单个细胞上

    什么是机器视觉?光电传感器视觉传感器的比较

    视觉传感器是机器视觉系统的核心,是提取环境特征最多的信息源。它既要容纳进行轮廓测量的各种光学、机械、电子、敏感器等各方面的元器件,又要体积小、重量轻。
    发表于 07-12 12:26 958次阅读
    什么是机器<b class='flag-5'>视觉</b>?光电<b class='flag-5'>传感器</b>与<b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>的比较

    触觉传感器分类、功能、发展历程

    人类皮肤的感知都是定性却无法定量。而触觉传感器可以模仿人类皮肤,更让人惊叹的是,还可以把温度、湿度、力等感觉用定量的方式表达出来,甚至可以帮
    发表于 06-29 09:20 2957次阅读
    触觉<b class='flag-5'>传感器</b>分类、功能、发展历程

    智驾系统感知层面常见的几种传感器

    人类视觉动物,凭借双眼获取视觉信息、辨别方向和距离。而当你的汽车帮助你驾驶的时候,什么又是它的“眼睛”呢? 答案是车载传感器。它们持续不断地采集环境信息,然后回传给智能汽车的大脑——
    的头像 发表于 06-25 17:25 644次阅读

    微型神经形态器件模拟人类视觉和记忆

    人眼只有一个视网膜,可以捕捉整个图像,然后由大脑进行处理,以识别物体、颜色和其他视觉特征。研究团队从人眼中汲取灵感,创造出具有类似功能的“相机”。该器件通过使用单一元素图像传感器来模拟视网膜
    的头像 发表于 06-21 10:28 382次阅读

    主流的机器视觉技术有哪些呢

    ,机器视觉的目标,即构建一个在可控环境中处理特定任务的机器视觉系统。由于工业中的视觉环境可控,并且处理任务特定,所以现如今大部分的机器视觉被应用在工业当中。  
    的头像 发表于 06-16 11:03 513次阅读
    主流的机器<b class='flag-5'>视觉</b>技术有哪些呢