0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

九天睿芯首款视觉应用的感存算一体新型架构计算芯片流片成功,可同时支持基于帧的相机和事件相机的处理

21克888 来源:电子发烧友网 作者:综合报道 2021-09-27 21:41 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

早在1992年,中国工程院院士许居衍便预测,2014-2017年,人类将进入硅技术生命曲线上的拐点,即将进入“后摩尔时代”。现有冯诺依曼计算系统采用存储和运算分离的架构,存在“存储墙”与“功耗墙”瓶颈,严重制约了系统算力和能效的提升。人工智能的发展已经被算力不足,能效过低所约束和限制。
早年兴起的AR/VR,也因为受限于算力,并未能完全打开市场。今年来全球顶尖大厂又开始开重视AR,继2014年脸书重金收购oculus,今年8月底字节重金收购pico。未来十年,互联网巨头必将在元宇宙这个数十万亿级的巨大市场展开漫长大战。而华为,小米,苹果,百度等,持续重金投入自动驾驶,国内新能源车企的兴盛,与海外特斯拉和传统车企的入局,自动驾驶标配的市场需求及行业布局已经非常明确。而深度学习的高强度运算,使芯片超高温发热,不仅影响芯片的持续算力稳定,也将影响芯片的使用寿命,影响行车安全,更使得未来的新能源汽车难以实现长效续航。基于精简控制,算力堆叠和数据流优化的微架构AI芯片创新已经难以为继;基于新器件和新架构来开发新的人工智能芯片就显得非常必要和急需,这样新型架构AI计算芯片才能满足日新月异的市场需求。

九天睿芯基于多年在全球领先的视觉领域感存算一体研究学习和实践积累,并和来自世界顶级图像传感器公司的研发合作和战略投资,已设计出可广泛应用于视觉领域的超高能效比(20Tops/W)基于SRAM的感存算一体架构芯片ADA20X。这是一款可应用于多种视觉场景的模数混合AI视觉芯片。该芯片存算核心单元已于2021年5月首次流片回片,近日已经完成性能验证。
由于神经元仅仅在累积到足够电荷数量之后才会激活,因此在大多数时间处于低功耗的待机状态,从而大大降低了功耗。或者从另一个角度上来说,神经拟态芯片仅仅在检测到有意义的事件后才会进行处理,从而大大降低了能量。所以神经拟态芯片又可以称为事件驱动处理”芯片,但纯事件驱动的相机和处理会丢失一些静态的高精度信息。而九天睿芯的芯片,可以同时支持高精度的图像及高时间分辨率的事件处理。

综合来看,九天睿芯ADA20X具有以下几大优势和特性:

1、像人脑一样的存算一体架构,打破了冯诺依曼存储计算分离的计算架构所造成的“内存墙”的系统限制,这是类脑计算的核心突破。
2、高能效比,并且不会因计算任务的架构复杂化而功耗激增。这使得让计算耗电和散热两大难题找到新的解决方向。
3、可同时支持CNN和 Transformer及以SNN代表的类神经元计算架构,在未来AI发展之路上想象无限。并且具备架构灵活,阵列化计算效率不衰减等等优点。
4、在输入形式上,可以同时支持动态视觉传感器(aka事件相机)的event输入,也可以支持传统相机的图像输入。
5、配有基于存内计算的ISP,可同时支持事件和图像的预处理。
 
感存算一体架构与传统架构对比优势

ADA20X具有高度可定制性,可依据不同的市场需求,定制不同算力及接口的专用芯片,算力覆盖从0.3Tops-200Tops,但最低功耗却可低至μW级别,可以满足平板电脑、可穿戴、智能家居、AR/VR、电池供电IPC、ADAS等多种不同的视觉应用场景。相比传统数字AI视觉芯片,纯数字芯片的存内计算面积大(运算单元大),数据搬运功耗大,而ADA20X则具备数量级级别优势的超低功耗,是传统数字芯片功耗的约1/10, 更可以实现更高的能效比,针对电池供电类设备等一系列对超低功耗,高能效比的应用领域有无与伦比的架构先发技术优势。比如AR场景中的视频处理中的手势识别、眼球跟踪,高能效比的计算芯片可以极大的提高AR设备的使用时长,从而提升用户体验。这是感存算一体技术,作为后摩尔定律时代一个最为重要的技术突破方向,首次有实际商用芯片产品落地。
ADA20X实物图

今年6月九天睿芯也已完成了由韦豪创芯和浦东科创联合领投的亿元级人民币的A轮融资,公司首颗量产芯片ADA100获得国内多个战略级客户的高度认可。团队其他核心成员毕业于瑞士联邦理工、新加坡南洋理工大学、清华大学、北京大学、西安电子科技大学、电子科技大学等,并曾就职于华为、IMEC、Qualcomm、Intel、汇顶等半导体知名企业,在Neuromorphic Engineering(神经拟态工程)、芯片设计开发、神经网络及计算架构领域研发经验十数年。九天睿芯在深圳,上海,成都,瑞士均有研发中心,也期待更多半导体相关的海内外人才的加入,共同开拓后摩尔时代的新篇章。

Prof Tobi Delbruck, IEEE Fellow, ETH教授,事件相机发明人,九天睿芯科学顾问,博士毕业于加州理工神经拟态工程开拓者CarverMead实验室,Insightness 联合创始人(被Sony收购),Inivation联合创始人(被三星投资):
It is a great step forwards for Reexen to have silicon for NPU with SRAM based mixed-signal in-memory computing. This field is crowded, but Reexen is one of only a handful that has silicon with this combination of features. Their partnership with such MRAM-capable fab is rare and CEO Liu -- who focused on combined frame and event-based vision processing for her PhD at my group and already has a lot of experience as entrepreneur with a big network of connections -- has assembled a team led by the creative technical strength of CSO Yang, who has rich experience in mixed signal design for neuromorphic sensing and processing . The application of event-based vision and audio sensors needs efficient parallel processors especially for AR/VR. I look forward to seeing what this technology can concretely offer.
九天睿芯已经有了视觉应用的基于SRAM的模数混合的存内计算芯片,这是个大的里程碑。NPU方向虽然已经比较拥挤,但九天睿芯的芯片是少数不多的能够实现这种性能和同时支持事件及图像处理的。九天睿芯CEO刘洪杰,博士毕业于我的实验室,专注于事件与图像的融合处理,同时拥有很多人脉资源,聚集了首席科学家杨等带领的非常有创新能力的团队,具有丰富的混合信号神经拟态传感及处理芯片设计经验。 事件相机和事件语音传感器的应用需要非常高效的并行处理器,尤其是在AR/VR等的应用上, 我非常期待这个技术带来的影响。

韦豪创合伙人梁龙:
很高兴韦豪创芯于2021年领投了由刘洪杰博士创立的九天睿芯的A轮融资,在多次的产业链技术交流中,充分感受到九天睿芯在感存算一体技术积累实力和以及扎实的产品创新及落地能力。
韦豪创芯持续关注超低功耗解决方案在个人穿戴方向应用创新,随着AR/VR ,电池供电IPC,手表,TWS耳机市场的持续爆发,如何更好的支撑“always on“ 和长时间待机成为影响用户体验的关键功能,九天睿芯的基于SRAM的感存算一体技术给出了一个很好的路径,这个路径在目前的工艺基础上最具量产性而且可以达到比较高的计算精度和面积功耗效率,我们非常期待相关产品尽快落地,不断提高个人穿戴的用户体验。

上海韦豪创芯投资管理有限公司专注于泛半导体领域优质企业的股权投资。公司管理团队具备丰富的硬科技行业从业和投资经验,不断发现和赋能优秀的泛半导体领域高成长企业。目前公司着力于五大核心投资赛道:超越视觉、汽车半导体、可穿戴设备、电源及信号链以及集成电路制造装备及材料。

浦东科创海望基金CTO刘子青:
很高兴由浦东科创设立的私募基金,海望知识产权股权投资基金于2021年和韦豪共同领投了刘洪杰博士创立的九天睿芯的A轮融资,浦东科创浦东科创集团一直聚焦产业链最上游、价值链最高端和技术体系的最底层,深耕具有知识产权、壁垒足够高、难以模仿和复制的关键核心硬科技领域的投资,九天睿芯的感存算一体的技术,作为后摩尔定律时代一个最为重要的技术方向,非常符合我们浦东科创集团的投资理念。同时我们也注意到,九天睿芯团队汇聚了一批世界相关领域顶尖水准的科学家,他们不但具备国际化视野和国际合作经验的同时,也具备丰富的芯片量产经验,公司团队非常务实,从轻量级的语音智能信号链芯片起步,逐步过渡到更高算力的视觉处理芯片逐步迭代,从而完成感存算一体这个新型技术架构从科研到工业化应用的转换;

浦东科创集团是上海市浦东新区政府为推进有全球有影响力的科创中心建设,推动高科技产业发展出资设立的、专业从事创业投资、科技金融服务的国有大型企业集团。公司成立于1999年6月,是中国最早一批由地方政府出资设立的国有创业投资机构。公司旗下拥有4家市发改委备案的创投资质企业,已陆续投资了中微、盛美、晶晨、复旦张江、透景生命、奕瑞光、翱捷科技、芯原等一大批有行业影响力的半导体龙头企业、上市公司、独角兽企业,并参与管理了国家中小企业发展基金、上海市集成电路基金、人民浦东文创基金、上海市文化产业发展基金等。集团目前拥有强大的投资生态圈,广泛的产业和政府资源,深厚的投资关系网络,与交易所、投行、券商、基金、银行等有着紧密的合作关系。构建了从投资到退出的全产
.
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器视觉
    +关注

    关注

    163

    文章

    4729

    浏览量

    125011
  • 九天睿芯
    +关注

    关注

    0

    文章

    10

    浏览量

    4389
  • 存算一体
    +关注

    关注

    1

    文章

    114

    浏览量

    4969
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    新唐科技重磅推出全球RGB与TOF融合相机

    新唐(Nuvoton)重磅推出全球 RGB x TOF 融合相机,以创新架构打破二维视觉边界,为消费电子与工业自动化注入强劲动力。
    的头像 发表于 11-26 17:07 475次阅读

    载誉而归 | 苹科技斩获AABI火炬技术转移奖,一体技术探索跨境创新合作

    (PimchipTechnology)凭借在一体芯片领域的技术突破与跨境技术转化成果,成功斩获2025年AABI火炬技术转移奖。这
    的头像 发表于 11-04 10:03 481次阅读
    载誉而归 | 苹<b class='flag-5'>芯</b>科技斩获AABI火炬技术转移奖,<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一体</b>技术探索跨境创新合作

    一体AI芯片公司九天完成超亿元B轮融资

    全球领先的一体AI芯片公司九天(英文:Ree
    的头像 发表于 10-10 11:41 707次阅读

    在TR组件优化与一体架构中构建技术话语权

    电磁兼容性、热管理在内的12项专业能力评估。\"这种评估体系,正是行业对技术人才的分级认证标准。 1.2 异构计算架构下的能力矩阵 一体
    发表于 08-26 10:40

    文看懂“一体

    今天这篇文章,我们来聊个最近几年很火的概念——一体。为什么会提出“
    的头像 发表于 08-18 12:15 934次阅读
    <b class='flag-5'>一</b>文看懂“<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一体</b>”

    华大九天九天”系列活动助力集成电路产业蓬勃发展

    华大九天希望通过“九天”系列活动,打造个行业精英与企业应用通畅交流的专业平台,营造以“开放、合作、创新”为主体的产业生态圈,促进技术交流、行业合作及成长共享,让每
    的头像 发表于 07-22 09:57 788次阅读

    缓解高性能一体芯片IR-drop问题的软硬件协同设计

    在高性能计算与AI芯片领域,基于SRAM的一体(Processing-In-Memory, PIM)
    的头像 发表于 07-11 15:11 890次阅读
    缓解高性能<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一体</b><b class='flag-5'>芯片</b>IR-drop问题的软硬件协同设计

    一体AI芯片开发商九天获批设立深圳市博士后创新实践基地

    博士后高层次人才战略储备库,核心功能包括打通人才流动渠道、加速科研成果转化。   九天以技术创新与人才驱动为核心,深耕高性能芯片研发,筑牢技术护城河。此次获批是对企业科研实力与创新
    的头像 发表于 07-08 16:19 1678次阅读

    国际首创新突破!中国团队以一体排序架构攻克智能硬件加速难题

    2025 年 6 月 25 日,北京大学团队在智能计算硬件方面取得领先突破,国际上首次实现了基于一体技术的高效排序硬件架构 (A fas
    的头像 发表于 07-02 16:50 549次阅读
    国际首创新突破!中国团队以<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一体</b>排序<b class='flag-5'>架构</b>攻克智能硬件加速难题

    shimetapi:开源RGB+EVS视觉融合相机事件相机工具链与算法库

    事件相机的原始数据,执行高级的计算视觉算法,以提升数据质量、提取有用信息或进行三维理解。 包含的模块: 降噪 (Denoise): 去除事件
    的头像 发表于 06-26 13:52 464次阅读

    科技 N300 一体 NPU,开启端侧 AI 新征程

    随着端侧人工智能技术的爆发式增长,智能设备对本地力与能效的需求日益提高。而传统冯·诺依曼架构在数据处理效率上存在瓶颈,“内存墙”问题成为制约端侧AI性能突破的关键掣肘。在这背景下,
    的头像 发表于 05-06 17:01 862次阅读
    苹<b class='flag-5'>芯</b>科技 N300 <b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一体</b> NPU,开启端侧 AI 新征程

    PIMCHIP S300 全球28nm节点实现存一体产品化AI芯片

    PIMCHIP-S300 芯片是苹科技基于一体技术打造的多模态智慧感知决策 AI 芯片。其
    的头像 发表于 03-28 17:06 1982次阅读
    PIMCHIP S300 全球<b class='flag-5'>首</b><b class='flag-5'>款</b>28nm节点实现存<b class='flag-5'>算</b><b class='flag-5'>一体</b>产品化AI<b class='flag-5'>芯片</b>

    华大九天发布停牌公告 重大事项拟收购和半导体

    华大九天在3月17日午间披露了临时停牌事项,据悉,华大九天自3月17日起开始停牌,预计不超过10个交易日;重大事项为拟收购和半导体科技(上海)股份有限公司的控股权。 华大九天在公告中
    的头像 发表于 03-17 18:31 1185次阅读

    一体行业2024年回顾与2025年展望

    2024年,大模型技术的迅猛发展成为人工智能领域的核心驱动力,其对硬件力和存储效率的极致需求,促使一体技术在全球范围内迎来前所未有的关注与突破。随着模型参数规模的持续膨胀和应用场
    的头像 发表于 01-23 11:24 1683次阅读

    · 智启未来 — 2024苹科技产品发布会盛大召开

    8月8日,国际领先的一体芯片开拓者——苹科技在北京召开“
    的头像 发表于 12-18 15:31 2347次阅读
    <b class='flag-5'>存</b><b class='flag-5'>算</b>于<b class='flag-5'>芯</b> · 智启未来 — 2024苹<b class='flag-5'>芯</b>科技产品发布会盛大召开