0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Edge AI在深度学习应用中超越云计算

星星科技指导员 来源:嵌入式计算设计 作者:Saumitra Jagdale 2022-07-10 11:07 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

什么是边缘人工智能

Edge AI 在硬件上本地处理和实施机器学习算法。这种形式的本地计算减少了数据传输的网络延迟,并解决了一切都发生在设备本身上的安全挑战。

边缘人工智能的流程

Edge AI 的本地处理并不意味着机器学习模型的训练应该在本地进行。通常,训练在具有更大计算能力的平台上进行,以处理更大的数据集。最后,这个经过训练的模型可以部署在系统的处理器或硬件上。该系统具有人工智能加速功能以及用于实时数据处理应用程序的部署模型。

随着对 GPU、NPU、TPU 和 AI 加速器的需求增加,Edge AI 技术经历了巨大的增长。随着机器学习和人工智能已成为当前情况下的趋势技术,这种需求是显而易见的。因此,由于当前应用程序的需求,Edge AI 在硬件中找到了自己的位置。硬件中对本地高级处理和计算能力的需求解释了 Edge AI 的重要性。

云 AI 能比边缘 AI 活得更久吗?

Cloud AI 通过在云端远程提供计算能力来支持硬件处理。由于处理是远程进行的,因此系统在性能和处理方面更加强大。此外,云计算增加了有关架构和设计的选项。由于高级处理发生在云上,它降低了系统硬件功耗的复杂性。然而,正如引言中所讨论的,这些好处是以延迟和安全问题为代价的。

云AI的流程

当计算需求非常密集并且需要大量数据处理时,云人工智能可以比边缘人工智能更长寿。如果应用程序可以在延迟和安全性方面做出妥协,那么 Cloud AI 是比 Edge AI 更好的选择。Cloud AI 还可以解决功耗问题。但是,它不能被视为选择 Cloud AI 而不是 Edge AI 的决定因素。

边缘人工智能与云人工智能

在 Edge AI 和 Cloud AI 之间进行选择的不确定性主要发生在机器学习或深度学习用例中。由于深度学习算法需要密集处理,因此硬件的性能成为一个重要因素。Cloud AI 绝对可以为系统提供更好的性能,但大多数深度学习应用程序无法在数据传输延迟和网络安全威胁方面妥协。因此,对于人工智能应用,Edge AI 比 Cloud AI 寿命更长。

如前所述,功耗因素总是会影响边缘 AI 处理器。这是可以理解的,因为繁重的计算需要更高的电源。但是当前的 Edge AI 处理器具有 AI 加速器,可提供更高的性能和更低的功耗。然而,GPU 和 TPU 仍然需要更高的功率,但设计和电路架构的改进将克服这个问题。

由于单独的云并不是人工智能应用程序的绝佳选择,边缘和云人工智能的混合可以提供更好的性能。可能会影响延迟的部分处理可以在云上完成,其余部分则在硬件本身上完成。

示例:由于训练后的模型需要根据实时数据进行更新,因此可以在云端完成更新后的训练。但实时数据通过 Edge AI 在硬件上进行处理以生成输出。

因此,处理的划分带来了两种技术的最佳效果。因此,它可能是 AI 应用程序的更好选择。但是,大多数应用程序都需要更快的实时更新训练,因此 Edge AI 比 Cloud AI 技术寿命更长。因此,Edge AI 在深度学习应用方面正在超越 Cloud AI。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5272

    浏览量

    136075
  • AI
    AI
    +关注

    关注

    91

    文章

    41172

    浏览量

    302624
  • 深度学习
    +关注

    关注

    73

    文章

    5608

    浏览量

    124637
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    【智能检测】基于AI深度学习与飞拍技术的影像测量系统:实现高效精准的全自动光学检测与智能制造数据闭环

    内容概要:文档内容介绍了图仪器(Chotest)影像测量仪融合人工智能深度学习与飞拍技术的自动化检测解决方案。系统通过AI深度
    发表于 03-31 17:11

    边缘AI算力临界点:深度解析176TOPS香橙派AI Station的产业价值

    了设备产业分工的身位。OrangePi AI Station采用的昇腾310****P 处理器 ,构建了一套完整的异构计算体系: 1、 16核CPU (ARM架构,主频1.9GHz
    发表于 03-10 14:19

    使用NORDIC AI的好处

    Nordic 的 Edge AI 主要有以下几个好处(基于官方资料总结): 极低功耗、延长电池寿命 本地运行 AI,减少无线传输次数,而无线收发是最耗电的部分。设备只需上传“结果/
    发表于 01-31 23:16

    高稳定低抖动156.25 MHz LVDS晶振:破解高速AI计算时钟瓶颈

    计算AI 训练集群项目中,系统高速计算节点与网络交换模块
    的头像 发表于 12-26 15:46 590次阅读
    高稳定低抖动156.25 MHz LVDS晶振:破解高速<b class='flag-5'>AI</b>与<b class='flag-5'>云</b><b class='flag-5'>计算</b>时钟瓶颈

    探索PSOC Edge E84 AI Kit:开启下一代机器学习边缘设备设计之旅

    探索PSOC Edge E84 AI Kit:开启下一代机器学习边缘设备设计之旅 电子工程师的世界里,不断追求创新和高效是永恒的主题。今天,我们将深入探讨一款专为快速原型开发而设计的
    的头像 发表于 12-18 14:45 904次阅读

    一文了解ai计算盒子(边缘计算盒子)是到底是什么产品?

    物联网与人工智能深度融合的当下,数据处理的效率和实时性成为各行业数字化转型的关键。ai计算盒子(又称边缘计算盒子、
    的头像 发表于 11-10 14:48 1196次阅读
    一文了解<b class='flag-5'>ai</b><b class='flag-5'>计算</b>盒子(边缘<b class='flag-5'>计算</b>盒子)是到底是什么产品?

    AI芯片:科技探索与AGI愿景》—— 勾勒计算未来的战略罗盘

    如果说算力是AGI的“燃料”,那么AI芯片就是制造燃料的“精炼厂”。本书的卓越之处在于,它超越了单纯的技术拆解,成功绘制了一幅从专用智能迈向通用智能的“战略路线图”。作者以芯片为棱镜,折射出算法
    发表于 09-17 09:32

    【「AI芯片:科技探索与AGI愿景」阅读体验】+第二章 实现深度学习AI芯片的创新方法与架构

    来加速经典数据的学习 ②把量子计算应用于量子数据的学习。 4.2 量子计算机的硬件实现方法与进展 ①量子点法 利用硅原子的电子,通过
    发表于 09-12 17:30

    【「AI芯片:科技探索与AGI愿景」阅读体验】+内容总览

    、集成芯片、分子器件与分子忆阻器,以及打印类脑芯片等。 第五章至第八章分别探讨用化学或生物方法实现AIAI科学发现创新应用、实现神经形态计算
    发表于 09-05 15:10

    AI 辅助逆向抄数:点优化工具与深度学习建模能力消费电子领域的应用

    消费电子行业快速迭代的背景下,传统逆向抄数技术处理复杂产品结构和满足高效研发需求时逐渐显露出局限性。人工智能(AI)技术的融入,特别是点优化工具与
    的头像 发表于 08-22 09:59 918次阅读
    <b class='flag-5'>AI</b> 辅助逆向抄数:点<b class='flag-5'>云</b>优化工具与<b class='flag-5'>深度</b><b class='flag-5'>学习</b>建模能力<b class='flag-5'>在</b>消费电子领域的应用

    AI 芯片浪潮下,职场晋升新契机?

    、新架构不断涌现。能够在工作中提出创新性的解决方案,推动 AI 芯片性能、功耗、成本等关键指标的优化,将极大提升在职称评审的竞争力。例如,芯片设计引入新的
    发表于 08-19 08:58

    AI 边缘计算网关:开启智能新时代的钥匙​—龙兴物联

    ,这一过程常受网络延迟和不稳定的困扰。如今,借助 AI 边缘计算网关,数据处理任务下沉至网络边缘,本地即可快速完成。以智能安防监控为例,大型商场
    发表于 08-09 16:40

    【书籍评测活动NO.64】AI芯片,从过去走向未来:《AI芯片:科技探索与AGI愿景》

    创新、应用创新、系统创新五个部分,接下来一一解读。 算法创新 深度学习AI芯片的创新上,书中围绕大模型与Transformer算法的算力需求,提出了一系列架构与方法创新,包括存内
    发表于 07-28 13:54

    任正非说 AI已经确定是第四次工业革命 那么如何从容地加入进来呢?

    芯片、更高效的深度学习算法等。通过与参会的专家学者和企业代表交流,可以拓宽视野,寻找合作机会。 加入AI行业协会或者专业社群。在这些组织,可以分享自己的见解和经验,也能从他人那里获取
    发表于 07-08 17:44

    2.0.0版本的ST Edge AI Corelinux平台上可以把量化后的onnx模型转换为.nb,但是运行报错,缺少文件,为什么?

    2.0.0版本的ST Edge AI Core工具linux平台上应该是可以把量化后的onnx模型转换为.nb,但是运行报错,缺少文件。
    发表于 06-17 06:29