侵权投诉

索尼宣布即将发布两款智能视觉传感器:IMX500和IMX501

MEMS 2020-06-01 11:03 次阅读

支持高速边缘人工智能(AI)处理,构建链接云服务的最佳视觉系统

据麦姆斯咨询报道,近日,索尼(Sony)公司宣布即将发布两款智能视觉传感器:IMX500和IMX501,这是全球首款配备人工智能(AI)处理功能的CMOS图像传感器。该CMOS图像传感器自身集成AI处理功能,可以实现高速边缘AI处理和提取必要的应用数据。当使用云服务时,利用该传感器构建的视觉系统可减少数据传输延迟,解决隐私问题并降低功耗和通信成本。

索尼智能视觉传感器为广大应用开发者提供了研发配备AI功能的摄像头的机会,通过高速数据处理可实时跟踪目标对象,应用领域包括智慧零售、智能安防、智能交通及智慧工业等,并且有助于构建链接云服务的最佳视觉系统。
 

智能视觉传感器(左:IMX500;右:IMX501)

物联网的普及导致各种各样的设备都将连接到“云”,并且从这些设备获取的信息可通过云AI处理,这使得云信息处理系统的使用变得司空见惯。但是,在云中处理的信息量不断增加,带来了各种问题:数据传输延迟增加,阻碍了实时信息处理;将个人身份数据存储在云中,造成用户安全问题;云服务带来的其它问题,如电力消耗和通信成本的增加……

索尼智能视觉传感器由像素阵列芯片(感光功能)和逻辑电路芯片(包括计算和存储功能)进行3D堆叠而成,是全球第一款在逻辑电路芯片上集成AI图像分析和处理功能的CMOS图像传感器。其中,像素阵列芯片获取的信号利用传感器中的AI处理,无需高性能处理器或外部存储器,从而使边缘AI系统得以发展。该传感器输出元数据(属于图像数据的语义信息)而不是图像信息,从而减少数据量并解决隐私问题。此外,边缘AI可以为通用应用提供多种功能,例如具有高速AI处理的实时对象跟踪,也可以根据用户需求或系统使用位置等条件,通过重写内部存储器来选择不同的AI模型。
 

像素阵列芯片采用背照式(BSI)工艺,有效像素约为1230万,可在宽视角下捕捉图像信息。除了传统的CMOS图像传感器运算电路外,该逻辑电路芯片还集成了索尼专用于AI信号处理的数字信号处理器(DSP),以及用于AI模型的存储器。这种配置消除了对高性能处理器或外部存储器的需求,使其成为边缘AI系统的理想选择。

像素阵列芯片获取的信号先通过ISP(图像信号处理器)处理,然后在逻辑电路芯片上进行AI处理,提取的信息作为元数据输出,从而减少处理的数据量。另外,确保不输出图像信息有助于降低安全风险并解决隐私问题。除了传统CMOS图像传感器记录的图像信息外,用户还可以根据自己的需求和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI(感兴趣区域)特定区域提取图像。
 

 

当使用传统CMOS图像传感器拍摄视频时,必须为每个单独的输出图像帧发送数据以进行AI处理,从而导致数据传输量增加,并且难以提供实时处理。索尼智能视觉传感器在逻辑电路芯片上执行ISP处理和高速AI处理(MobileNet V1的处理时间为3.1毫秒),从而在单个视频帧中完成整个过程。这种设计使得“在录制视频的同时提供高精度、实时的目标跟踪功能”成为可能。

 

 

用户能够将自己选择的AI模型写入嵌入式存储器中,并可根据用户要求或系统使用位置等条件对其进行重写和更新。例如,当在零售商场安装集成智能视觉传感器的多个摄像头时,应用可以横跨不同的时间、地点(环境)或目的。当安装在商场入口时,它可以用来统计访客数量;当安装在商店货架上时,它可以用来检测库存短缺情况;当安装在商场天花板上时,它可以用于绘制商店访客热图(检测客户聚集的位置)等。同时,用户可以随时改写这些摄像头中的AI模型,比如从“用于检测热图的模型”改成“用于识别消费者行为的模型”。

 

 

 

索尼智能视觉传感器关键指标:

 

 



原文标题:索尼发布全球首款具有AI处理功能的智能视觉传感器

文章出处:【微信号:MEMSensor,微信公众号:MEMS】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

5G如何解决传输可靠性的问题?

先来看5G传输过程中产生的时延,主要由3个部分构成:(1)无线接入部分的传输时间、(2)核心网部分的....
发表于 07-13 11:31 13次 阅读
5G如何解决传输可靠性的问题?

邬贺铨:5G等新基建与传统基建同步发展,增加消费与就业机会

邬贺铨认为,新基建应用,目前仍然需要更好的商业模式来支撑。基建的工业互联网的应用与消费互联网不一样。....
的头像 我快闭嘴 发表于 07-13 11:07 0次 阅读
邬贺铨:5G等新基建与传统基建同步发展,增加消费与就业机会

HITL的新概念将进一步完善AI和机器学习模型

人工智能科技和其机器学习技术正步入一个新的阶段,它不仅要求机器智能完成某项任务,而且规定机器达到客户....
发表于 07-13 09:37 15次 阅读
HITL的新概念将进一步完善AI和机器学习模型

AI神经网络与大数据中的联合应用

大数据时代,一方面,传统方法无法处理体量浩大、多源异构、变化快速的数据,提取稀疏而珍贵的价值,神经网....
发表于 07-13 09:34 17次 阅读
AI神经网络与大数据中的联合应用

人工智能应用场景解析

最近,许多初创公司提出了航空业充满活力的想法。基于AI的软件可以提取航空制造业数千个采购管理信息。
发表于 07-13 09:29 16次 阅读
人工智能应用场景解析

乘着5G、人工智能等新技术东风,推动制造业数字化转型

“智能化升级后的‘无人车间’,可提高30%的劳动效率和20%的产能。”宝钢股份冷轧厂有关负责人说,智....
的头像 我快闭嘴 发表于 07-13 09:09 139次 阅读
乘着5G、人工智能等新技术东风,推动制造业数字化转型

影响人工智能的核心 机器学习

  随着计算机和互联网越来越深入到生活中的方方面面,人们搜集到的数据也呈指数级的增长。在这种情况下,....
发表于 07-13 08:59 26次 阅读
影响人工智能的核心 机器学习

影响人工智能发展的因素解析

人工智能(AI)正在不断“嵌入”人类社会:交通出行、住房家居、教育医疗、养老助残、文化体育……越来越....
发表于 07-13 08:52 75次 阅读
影响人工智能发展的因素解析

解析你不知道“链接力”

随着2020世界人工智能大会的启幕,这三天,上海又进入了“人工智能”时间。
发表于 07-13 08:48 28次 阅读
解析你不知道“链接力”

人工智能开启智慧新生活

人工智能(Artificial Intelligence,简称AI)是研究开发能够模拟、延伸和扩展人....
发表于 07-13 08:42 30次 阅读
人工智能开启智慧新生活

未来人工智能将主导新一轮科技革命

2020世界人工智能大会云端峰会在上海拉开帷幕。1场开幕式、2场全体会议、10场主题论坛和若干场行业....
发表于 07-13 08:35 113次 阅读
未来人工智能将主导新一轮科技革命

人脸识别技术为经济社会发展带来的新机遇

人脸识别技术的研究最早起源于20世纪60年代,到90年代进入了初级应用阶段。近年来,随着计算机视觉技....
发表于 07-12 12:23 1904次 阅读
人脸识别技术为经济社会发展带来的新机遇

人脸识别技术告别纯粹的软件算法,成为产业链完善建设的综合生态

然而,各领域对人脸识别应用需求的差异,以及行业开发渗透过程中的渠道建设和应用实施,都将对人脸识别的商....
发表于 07-12 12:10 425次 阅读
人脸识别技术告别纯粹的软件算法,成为产业链完善建设的综合生态

如何推动5G、边缘计算和人工智能的发展?

在红帽全球峰会虚拟体验活动期间,Spelman和来自SiliconANGLE Media移动直播工作....
的头像 我快闭嘴 发表于 07-12 11:56 565次 阅读
如何推动5G、边缘计算和人工智能的发展?

IBM携手三星与沃达丰,开创5G和云端新合作模式

作为全球一流的人工智能解决方案和云平台公司,IBM利用人工智能技术、云计算、区块链、物联网等技术和解....
的头像 我快闭嘴 发表于 07-12 11:50 698次 阅读
IBM携手三星与沃达丰,开创5G和云端新合作模式

5G和人工智能的进展与落地,推动着数据中心建设的发展

“5G技术本身不会带来数据的增加,但是依托5G的应用将会带来数据量的指数级增长。”吕天文说,人工智能....
的头像 我快闭嘴 发表于 07-12 11:37 488次 阅读
5G和人工智能的进展与落地,推动着数据中心建设的发展

AWS张侠:机器学习成为下一阶段企业数字化转型的核心推进点

值得一提的是,亚马逊是探索和应用机器学习技术的佼佼者。20多年来,它在人工智能和机器学习方面进行了大....
的头像 我快闭嘴 发表于 07-12 11:14 519次 阅读
AWS张侠:机器学习成为下一阶段企业数字化转型的核心推进点

谈剑锋:5G网络技术飞速发展为我国经济社会创新转型提供了全新动能

他还建议加大扶持做大做强网络安全产业和建立适应人工智能发展的数据流通体系。谈剑锋表示,要瞄准数据驱动....
的头像 我快闭嘴 发表于 07-12 11:09 624次 阅读
谈剑锋:5G网络技术飞速发展为我国经济社会创新转型提供了全新动能

无人机+机器学习可探测人群中的暴力行为

相信不少人对于无人机都非常熟悉,不过想到自己被无人机监控可能都会感到意思不舒服,不过最近科学家们开发....
发表于 07-12 11:01 112次 阅读
无人机+机器学习可探测人群中的暴力行为

python是人工智能的入门编程语言

金融行业人员面对庞大的数据和复杂的流程时,输入几行代码就可以一次性处理上百个表格,自动抓取关键数据绘....
发表于 07-12 10:37 333次 阅读
python是人工智能的入门编程语言

预计2023年全球IIoT市场将达7513亿美元,企业如何受益

根据趋势科技美国公司的一份报告,“来自传感器和其他信息源的实时数据可帮助工业设备和基础设施进行“决策....
发表于 07-12 10:10 155次 阅读
预计2023年全球IIoT市场将达7513亿美元,企业如何受益

腾讯正式发布2020人工智能白皮书:泛在智能

白皮书指出,自2015年国家产业政策正式提及人工智能以来,政策从初期的聚焦于体系设计、技术研发以及标....
的头像 我快闭嘴 发表于 07-12 10:06 578次 阅读
腾讯正式发布2020人工智能白皮书:泛在智能

物联网设备数据访问和管理的3大安全问题

报告显示,到2020年底,欧洲的物联网市场规模估计将达到2422.22亿欧元,并且还预测,到2025....
发表于 07-12 10:01 141次 阅读
物联网设备数据访问和管理的3大安全问题

5G智慧警务的跨越式发展源于中国移动OneLink5G切片运营平台的赋能

• 智慧警用无人机:通过5G网络的高带宽能力,实现4K画质的高清航拍视频实时回传、自动巡航、喊话指挥....
发表于 07-12 09:37 207次 阅读
5G智慧警务的跨越式发展源于中国移动OneLink5G切片运营平台的赋能

工厂的数字化转型离不开坚实的IT基建和数据基础

依附于先前打造的坚实的数字化基础,2019-2021年间将投入超过4亿元人民币,引进智能生产设备和工....
发表于 07-12 09:28 169次 阅读
工厂的数字化转型离不开坚实的IT基建和数据基础

5G通信技术和人工智能激发视频物联网市场的发展潜力

在过去,通过蜂窝网络连接的摄像机由于带宽及稳定性的因素,在应用上非常局限。Berg Insight预....
发表于 07-12 09:27 302次 阅读
5G通信技术和人工智能激发视频物联网市场的发展潜力

中国电信携手大悦城控股,共同为5G智慧商业数字化转型按下加速键

通过双方战略合作,中国电信北京公司将为大悦城提供长期有力的5G云网建设、信息化应用支持和高质量服务保....
的头像 我快闭嘴 发表于 07-12 09:19 270次 阅读
中国电信携手大悦城控股,共同为5G智慧商业数字化转型按下加速键

AI新基建,5G新机遇

时值世界百年未有之大变局,中国新基建聚焦 5G、人工智能、大数据中心、工业互联网等七大新型科技领域,....
的头像 我快闭嘴 发表于 07-12 09:14 502次 阅读
AI新基建,5G新机遇

2020年第三届AI大会圆满成功,最新IP/芯片/方案/生态加速AI落地

2020年7月10日,由全球电子科技领域专业媒体电子发烧友 举办的第三届2020年人工智能大会盛大开....
发表于 07-11 13:50 1332次 阅读
2020年第三届AI大会圆满成功,最新IP/芯片/方案/生态加速AI落地

人工智能的三大技术

毫不夸张地说,2019年人工智能的现状就是强化学习回归的一年。简单介绍一下强化学习,它是机器学习中的....
发表于 07-11 11:20 576次 阅读
人工智能的三大技术

世界人工智能大会马云:人工智能应该叫机器智能

今年开幕的世界人工智能大会上,马云以联合国数字合作高级别小组联合主席的身份,以全息影像的方式出现在大....
发表于 07-11 11:13 802次 阅读
世界人工智能大会马云:人工智能应该叫机器智能

四个方面为你解读人工智能

任何一个入门的软件开发人员都会听到这句话:算法是软件的灵魂!近年来大火的“机器学习”即是在算法在人工....
发表于 07-11 10:59 76次 阅读
四个方面为你解读人工智能

商汤科技上海新一代人工智能计算与赋能平台项目正式启动

平台将打造以商汤自主研发的原创AI训练框架SenseParrots为核心,包括集成训练开发环境、数据....
的头像 机器人技术与应用 发表于 07-11 10:15 417次 阅读
商汤科技上海新一代人工智能计算与赋能平台项目正式启动

浙江大学研发的新一代人工智能科教平台“智海”正式上线

据了解,该平台将为新一代人工智能教材的学习提供算法实训,让学习者体会人工智能具能、使能和赋能,从算法....
的头像 机器人技术与应用 发表于 07-11 10:04 441次 阅读
浙江大学研发的新一代人工智能科教平台“智海”正式上线

快讯:最高法院改判小i机器人专利获胜,苹果侵权案有望反转

极智嘉近日推出两款智能消毒机器人——智能紫外线消毒机器人Lavender和智能喷雾消毒机器人Jasm....
的头像 机器人大讲堂 发表于 07-11 09:45 358次 阅读
快讯:最高法院改判小i机器人专利获胜,苹果侵权案有望反转

互联网不断演进,未来将发生无限可能

互联网让人们的办事越来越便利。从前办事跑断腿,现在是数据多跑路、老百姓少跑路,国家与地方一体化电子政....
的头像 我快闭嘴 发表于 07-10 20:07 473次 阅读
互联网不断演进,未来将发生无限可能

对人工智能的误解

可以说,关于人工智能最普遍和潜在危险的误解是,它将夺走人类的工作岗位。是的,自动化正导致一些低技能工....
发表于 07-10 19:20 127次 阅读
对人工智能的误解

瑞萨电子:嵌入式终端与人工智能融合改变工业格局

瑞萨电子在汽车、工业、基础设施和物联网等多个领域提供了专业可信的嵌入式设计与半导体解决方案,面对工业....
的头像 E4Life 发表于 07-10 18:47 1511次 阅读
瑞萨电子:嵌入式终端与人工智能融合改变工业格局

基于SaaS的人工智能培训将改变游戏规则

如果用户使用基于机器学习的系统,那么需要了解有关训练数据的知识。在将数据加载到人工智能模型以进行模型....
发表于 07-10 18:47 175次 阅读
基于SaaS的人工智能培训将改变游戏规则

医疗领域的人工智能

从宏观上看,人工智能(AI)提供了劳动力补充,AI成为一种数据决策的工具,而其作为合作伙伴也一定具备....
发表于 07-10 18:44 348次 阅读
医疗领域的人工智能

深度学习框架大PK

近年来,开发者社区中,「开源」成了新流行趋势。 尤其是深度学习框架,自腾讯2017年将ncnn....
发表于 07-10 18:37 310次 阅读
深度学习框架大PK

你不知道的人工智能9个方面

1、人工智能是什么? 人工智能是一门利用计算机模拟人类智能行为科学的统称,它涵盖了训练计算机使其能够....
发表于 07-10 18:26 510次 阅读
你不知道的人工智能9个方面

解析人工智能未来如何发展

“我们要做到AI向善,努力让人工智能实现可知、可控、可用、可靠。”在昨天的世界人工智能大会上,腾讯董....
发表于 07-10 18:22 205次 阅读
解析人工智能未来如何发展

2020年人工智能未来可期

本届大会采用线上活动为主的形式,突破“面对面”的地域限制,实现“屏对屏”的跨越,更让这届大会科技范、....
发表于 07-10 18:18 379次 阅读
 2020年人工智能未来可期

对于人工智能会不会取代人类

关于人工智能,各位大佬都在表述自己的观点,有正面积极的,也有泼冷水的。@国纳环境酱人工智能的作用被夸....
发表于 07-10 18:11 346次 阅读
对于人工智能会不会取代人类

沪产载人飞行器将于今年年底试飞

作为本届人工智能大会线下展区唯一受邀参展的智能飞行器企业,携电动垂直起降飞行器V50大白鲨真机亮相上....
发表于 07-10 17:49 87次 阅读
沪产载人飞行器将于今年年底试飞

人工智能自动化领域将是IBM未来的发展重点之一

RPA应用人工智能和机器学习功能来执行以前需要人类执行的可重复任务。采用RPA可以降低成本,提高质量....
的头像 lhl545545 发表于 07-10 17:29 367次 阅读
人工智能自动化领域将是IBM未来的发展重点之一

重磅揭晓!电子发烧友2020年度首届“中国人工智能卓越创新奖”名单正式出炉

2020年7月10日,深圳讯由全球电子科技领域专业媒体电子发烧友举办的第三届2020年人工智能大会圆....
的头像 Carol Li 发表于 07-10 16:59 1710次 阅读
重磅揭晓!电子发烧友2020年度首届“中国人工智能卓越创新奖”名单正式出炉

人工智能诊疗、互联网教学等已实现

今天发布的《北京市加快新场景建设培育数字经济新生态行动方案》披露,本市将通过实施应用场景“十百千”工....
发表于 07-10 16:59 562次 阅读
人工智能诊疗、互联网教学等已实现

人工智能 互联网公司纷纷出手

近年来,人工智能作为未来科技发展趋势,也是当前最热门的科技技术,并得到广泛引用,各行业利用人工智能等....
发表于 07-10 16:52 628次 阅读
人工智能 互联网公司纷纷出手

人工智能改变客户体验的10种方式

  1)为客户提供准确,个性化的建议   人工智能可以分析客户的购买历史,然后为他们可能感兴趣的其他产品和服务提供建议。这...
发表于 06-19 11:20 268次 阅读
人工智能改变客户体验的10种方式

数字孪生再现旅行者号轨迹,可视化拉开航天新时代

[quote]做为数据可视化的一线重度参与者,本着技术为本,持续的奔波在自主研发的道路上。2020年,国家发改委多次点名‘数字孪生’...
发表于 06-18 09:29 229次 阅读
数字孪生再现旅行者号轨迹,可视化拉开航天新时代

ADAS视觉传感技术,为朝向自动驾驶趋势发展做好准备

在最近几年里,消费者越来越渴望先进的汽车技术,这些渴望由科技应用的增加所引发,并且成为汽车的购买要素,这实际上鼓舞了汽车...
发表于 06-02 08:00 1126次 阅读
ADAS视觉传感技术,为朝向自动驾驶趋势发展做好准备

大彩串口屏在智能档案柜上面的应用

二、产品优势 1. 智能档案柜集手动、电动、电脑控制于一体,操作方便、移动平稳、安全可靠。2. 采用红外感应方式对仓位的状态进行...
发表于 05-28 16:19 221次 阅读
大彩串口屏在智能档案柜上面的应用

延迟和指令呈现百度人工智能交互设计院的最新研究

有屏智能设备的多维对话:延迟和指令呈现  百度人工智能交互设计院最新研究...
发表于 05-25 09:46 115次 阅读
延迟和指令呈现百度人工智能交互设计院的最新研究

如何使用人工智能来发挥传感器数据的协同作用

人工智能(AI)目前正在为社会的方方面面带来革新。比如,通过结合数据挖掘和深度学习的优势,如今可以利用人工智能来分析各种...
发表于 05-19 08:13 302次 阅读
如何使用人工智能来发挥传感器数据的协同作用

电路设计行业未来将会转为人工智能

现在的社会正慢慢转向人工智能和电路的方向,而不是纯粹的电路设计。 未来,有可能超市不需要服务员,仅仅需要部分理货人员。 ...
发表于 05-18 15:51 352次 阅读
电路设计行业未来将会转为人工智能

人工智能、机器学习、数据挖掘有什么区别

人工智能、机器学习、数据挖掘的区别
发表于 05-14 16:02 135次 阅读
人工智能、机器学习、数据挖掘有什么区别

基于索尼SUB-LVDS并行桥的设计应用

索尼SUB-LVDS并行桥参考设计。许多分辨率高于720p60的索尼图像传感器不再能够使用传统的CMOS并行接口。随着I...
发表于 04-30 09:36 605次 阅读
基于索尼SUB-LVDS并行桥的设计应用

RPA与人工智能的相连

RPA与人工智能
发表于 04-13 09:23 197次 阅读
RPA与人工智能的相连