0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI算法和推理正日益依赖于终端进行的原因

4dD0_chinacmos 来源:未知 作者:李倩 2018-05-03 16:10 次阅读

数据预测,从2017年到2021年,5年时间,全球的IOT通过4G或者5G网络连在一起的设备会达到200亿台。在此情景之下,作为能够使得智能终端产品更加智能的AI也成为时下热词。万物互联大幕的逐渐拉起,也使得AI产业吸引了众多上下游企业的参与,尤其是随着芯片厂商以及终端品牌等的加入,AI在产品形态上已经呈现出多种多样。可以说,AI正给消费者和整个行业带来巨大可能性。

尽管在AI技术领域各家企业发力的方向有所区别,但是总体上他们对于AI的未来都已达成共识,即由于在巨大的万物互联时代,各个设备不仅仅是要联结在一起,而且会变得越来越智能,因此AI正以其发展的无限可能性给整个产业链带来巨大的机会。

正如高通产品总监刘学徽在4月26日由手机报在线举办的AI手机产业峰会上所表示,传统意义上的AI在云上面可以做模型培训,也可以做模型的推理。但是现在有一种趋势,即AI的运算能力,尤其是推理的过程,正慢慢变得大多数是依赖终端在运行的。这种趋势不管是对做模组还是做算法的厂家来讲,都是非常大的机会。

高通产品总监刘学徽

至于AI算法和推理正日益依赖于终端进行的原因,主要有三点:一是隐私性。刘学徽表示,不管是手机还是各种可穿戴设备都是人在使用,而现在人对隐私的意识正越来越强。而传统各种AI的算法、推理都是在云上做,这势必就会将所有的数据都上传到云上。相反,现在在终端做算法和推理,则可以避免将信息上传至云端的过程,用户也就可以相对放心。

二是低延时。刘学徽介绍到,不管AI怎么做,它都需要用户的体验,而一旦用户体验差,这个产品或者性能就没法推广开。例如,现在非常流行的手机人脸解锁、人脸开机就是典型的在端上使用人工智能的案例。而如果说开机的过程要把人脸信息采集传到云端,云端算完再传下来,这种延时性用户是很难接受的。因此终端运算和推理能够很好地解决用户对于延时性的反感问题。

三是可靠性和经济性。因为设备在端和云,端到端连接的过程会产生大量数据的交换,如果所有的AI能力都用云来做,势必对带宽的负载,包括中间通讯的可靠性等带来很大的挑战因此在终端的运作上会在可靠性和经济成本上占更大的优势。

在介绍了端上实现AI的三个优势之后,刘学徽还重点强调了高效的硬件、算法、软件工具以及端上AI计算和推理的重要性。其中,运算AI的硬件能力非常关键,需要轻薄,且对低功耗是强需求,算法也不能太庞大,而是要适合终端设备商运行,此外,软件工具也至关重要。

在所有AI终端设备方面,就目前而言,不得不提的就是手机终端了。可以说,手机由于其便携性,智能性,几乎是被公认的IOT的核心,它甚至可以变成各种各样IOT的设备。

另外,在手机上的AI的方向大概有几类。其中基于计算机视觉的应用是当下的主流,它包括摄像头各种各样的应用场景,比如背景虚化、照片处理、场景识别与分类等。例如,vivoX21手机的个人助理应用场景落地就是一个体现,它能够让手机里面有一个算法感知到用户是在车上、运动行走中、开车还是在地铁里等各种场景,从而根据场景来给用户提供对应的便利服务。

此外,AI的运用方向还涵盖了设备的厂家功耗,包括资源的管理、用户交互体验方面的语音交互、手势识别以及目前出现的采用人工智能方法来识别病毒或者是来防范设备端到端的安全等。

作为在全球芯片制造领域都具有领先优势的高通来说,刘学徽还介绍了高通在AI方面的产品布局。主要包含三大类:硬件、软件及框架。

其中,硬件包含INT8网络、FP32及FP16网络、FP32及INT88位网络,软件是硬件和应用之间的桥梁,高通软件包括一套SNPE的开发工具,以及支持Android和Hexagon NN的库。框架有CaffeCaffe2、TensorFlowTensorFlowLite、ONNX。以上就构成了AI E的产品系列。

此外,刘学会还强调,做最终的产品和最终的应用,需要和业内各方面领先的企业进行合作,例如,在国内高通与商汤、Face ++、腾讯、百度有合作,国际上和Google在TensorFlow方面有深度合作。值得一提的是,骁龙芯片,AI产品还是TensorFlow第一个终端上的商用芯片。

总体来说,终端AI是非常庞大的生态系统,没有一家公司可以把所有事情做掉,类似高通这种实力型的企业,其AI生态系统在支持多种框架和多种操作系统的同时,也仍然在积极开展与领先的AI算法公司、云服务商以及互联网厂家的深度合作,追求提供多样的应用场景的技术来与终端设备厂家进行配合。

可想而知的是,只有如此通力合作,整个AI手机产业链才能最终为消费者提供更加丰富的应用场景,为终端产品增加更多的价值。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 高通
    +关注

    关注

    76

    文章

    7160

    浏览量

    187862
  • 万物互联
    +关注

    关注

    1

    文章

    222

    浏览量

    13994
  • ai技术
    +关注

    关注

    1

    文章

    1132

    浏览量

    23702

原文标题:高通:物联设备5年将达200亿台,终端AI大势所趋

文章出处:【微信号:chinacmos,微信公众号:摄像头观察】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    苹果研发设备端大语言模型,提升AI性能与隐私保护

    古尔曼在“Power On”通讯中称,这款苹果LLM有望作为未来生成式AI功能的基石,并与现有云端AI服务明显区别开来,该模型将会完全依赖于用户设备进行运作。
    的头像 发表于 04-22 11:04 44次阅读

    开发者手机 AI - 目标识别 demo

    识别demo: JS实现UI界面的功能; Native接口及实现主要为JS提供接口进行AI推理。通过Native方式完成推理的前处理、推理
    发表于 04-11 16:14

    Groq LPU崛起,AI芯片主战场从训练转向推理

    人工智能推理的重要性日益凸显,高效运行端侧大模型及AI软件背后的核心技术正是推理。不久的未来,全球芯片制造商的主要市场将全面转向人工智能推理
    的头像 发表于 02-29 16:46 627次阅读

    分析 丨AI算法愈加复杂,但是机器视觉的开发门槛在降低

    机器视觉系统依赖于机器学习(machine learn)和深度学习(deep learn),尤其是深度学习的重要分支“卷积神经网络”在图像识别领域的应用,使机器视觉能够从原始像素数据中直接学习特征
    的头像 发表于 02-19 16:49 237次阅读
    分析 丨<b class='flag-5'>AI</b><b class='flag-5'>算法</b>愈加复杂,但是机器视觉的开发门槛在降低

    FX3 GPIF是否依赖于USB?

    我们基于 FX3 的设备 CAN 由电池供电,因此只需要 USB 即可打开电源,直到切换到电池作为电源。 FPGA 与 GPIF 相连。 但是,我们观察到,只要 USB 断开连接,GPIF事务就会失败。 GPIF是否依赖于USB?
    发表于 01-29 08:34

    Snapdragon Seamless技术赋能智能终端共同协作

    智能手机、平板、电脑、耳机、智能手表、XR头显甚至是智能汽车,我们每天都依赖于广泛的终端来完成工作、安排日常生活并进行娱乐。Snapdragon Seamless技术赋能上述智能终端
    的头像 发表于 01-08 09:55 234次阅读

    【先楫HPM5361EVK开发板试用体验】:4、TinyML测试(1)

    设备的资源限制。此外,TinyML还依赖于优化的推理引擎和针对嵌入式设备的硬件加速器,以实现高效的模型推理。 TinyML的应用领域非常广泛,包括智能传感器、健康监测、物联网、智能音频处理、自动驾驶
    发表于 12-22 10:12

    AI算法在RZ/V芯片中的移植推理流程

    之前文章已介绍了一些AI算法Demo的应用 ,我们提供从模型训练到RZ/V系列嵌入式端推理应用的完整流程。整体流程如下图所示。
    的头像 发表于 12-20 12:21 641次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>算法</b>在RZ/V芯片中的移植<b class='flag-5'>推理</b>流程

    HarmonyOS:使用MindSpore Lite引擎进行模型推理

    ; } 执行推理。 使用 OH_AI_ModelPredict 接口进行模型推理。 // 执行模型推理 OH_
    发表于 12-14 11:41

    安达发|AI算法全方位打造制造业AI智能化工厂的超级大脑

    呢?简单来说,APS系统就是通过AI算法来优化生产计划、调度和控制等环节,实现生产过程的智能化和自动化。它可以帮助企业提高生产效率、降低成本、提升产品质量等方面发挥重要作用。 然而,要实现APS系统的高效运行,需要依赖于强大的
    的头像 发表于 10-17 17:38 205次阅读

    CAN终端电阻的相关资料

    依赖于适当的端接技术,以将信号传播到网络中的所有cAN节点。如果没有正确的端接,则诸如CAN总线之类的物理上较长的导体会遭受信号反射,从而可能限制其所有部件之间的通信。
    发表于 09-22 08:08

    OpenHarmony AI框架开发指导

    2AI引擎代码依赖关系 建议:插件与OpenHarmony SDK在AI引擎指定的路径下进行代码开发 在AI引擎框架的整体规划中,OpenH
    发表于 09-19 18:54

    官方sdk里CONFIG_LOG_LEVEL是在哪里进行设置的?

    官方sdk里CONFIG_LOG_LEVEL是在哪里进行设置的,不进行,一直报错,看代码是依赖于LOG_LEVEL,但是LOG_LEVEL这个宏也没定义!
    发表于 09-14 08:38

    直接依赖于WS2812FX() 类中的LED数量和模式下WI-Fi的稳定性如何?

    直接依赖于 WS2812FX() 类中的 LED 数量和 模式下 WI-Fi 的稳定性。(在客户端模式下,稳定性要高得多。)。 ?? 我的简化代码在附件中注意:起始页地址为192.168.4.1 1
    发表于 05-22 07:58

    如何在RT-Thread OS环境下使用ncnn进行AI推理

    今天简报较短,主要演示一下如何在RT-Thread OS环境下使用ncnn进行AI推理
    的头像 发表于 05-04 16:29 804次阅读
    如何在RT-Thread OS环境下使用ncnn<b class='flag-5'>进行</b><b class='flag-5'>AI</b><b class='flag-5'>推理</b>