0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

研扬科技ARES-240AI/ARES-241AI,开启AIGC部署新时代

研扬科技AAEON 2023-12-30 08:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着ChatGPT的火爆,AIGC(生成式人工智能)这一新兴概念也备受瞩目。AIGC目前已经在很多领域得到了广泛应用,如新闻报道、广告创意、音乐创作等,它可以模仿人类的写作风格,甚至创造出全新的作品。然而AIGC的用途远非如此简单,随着AIGC通过海量数据训练的大规模神经网络模型(大模型)的模型层数、参数的增加,“思维方式”愈来愈趋向于人脑,使其在金融、制造、医疗等各领域的应用越来越广泛。

在训练过程中,大模型需要大量的计算资源来执行复杂的矩阵运算和其他计算任务。为了支持这些计算任务,需要使用高性能的计算设备。同时,还需要有效的算法和架构设计来优化模型的训练速度和效率。为提升整体算力效率和满足差异化需求,大模型一般需要万亿量级参数计算的“智算中心”。现阶段的“智算中心”通常采用云模式,通过共享、共融集结现有算力,万卡平台及配备高效网络交互机制构建大模型训练与推理平台。

可以看出,训练一个大模型代价是巨大的,且大模型落地部署的代价也极大,在工业界实际应用中不得不考虑部署的成本,模型轻量化是必不可少的。轻量化的其中一个方法是模型压缩,通过将通用大模型经过剪枝、量化和蒸馏,将大模型进行压缩得到轻量化模型,使其能够使用算力较小的设备进行训练推理,减轻应用单位的部署成本。

大模型通过不同的方法得到了有效的轻量化,还是无法阻止模型规模的增加,但是同时也刺激着各大芯片厂商在AI芯片上的研发投入,特别是受众面更广、性价比更高的AI系统化模块(SOM),其算力发展更是一年数倍级的提升。系统化模块(SOM)算力的提升,可处理大模型轻量化压缩后的小模型,有助于实现从基础大模型转向行业微调模型(通用2B),进而细化至场景结合模型(专用2B)的转换。而这些小巧的AI系统化模块是对空间、能耗、环境、安全、响应要求苛刻的边缘端设备的首选。在此过程中边缘端设备发挥着重要的作用来推动AI部署,网络边缘端比过去而言会受到更多重视,也将带来更大的市场。

研扬科技致力于为客户提供高质量、高性能的边缘端计算产品,是业界领先的边缘AI解决方案设计制造商。研扬作为英伟达Elite member of the NVIDIA Partner Network(合作伙伴网络精英成员),推出基于NVIDIA Jetson AGX Orin系统化模块(SOM)的两款紧凑型无风扇边缘盒子ARES-240AI和ARES-241AI。ARES-240AI和ARES-241AI将NVIDIA Jetson AGX Orin的超高性能与全新打造的强化耐用机壳相结合,32/64GB版本可选,提供了卓越的275 TOPS 的服务器级算力,在以往需要专业显卡支持才能运行的应用,比如自动汽车驾驶,现在凭借ARES-240AI和ARES-241AI的实时物体侦测、数据加速传输和强大的严苛环境耐受度等特性,可将整个操作移至边缘。这两款边缘盒子是重新定义自主边缘应用进行AI深度学习的理想载体。通过NVIDIA Jetson AGX Orin与其他 NVIDIA Jetson 模组、开发者套件获得同一 NVIDIA Jetson 软件栈的支持,这样您只需一次开发,即可在任意位置进行部署,从而加快产品上市速度。

NVIDIA Jetson AGX Orin

功能特点

01

ARES-240AI和ARES-241AI搭载的NVIDIA Jetson AGX Orin,拥有12核ARM v8.2 64位CPU和64 个 Tensor Core 的 2048 核 NVIDIA Ampere 架构 GPU,最高可达 275 TOPS的算力,提供了比Jetson AGX Xavier 高达8倍的AI性能。ARES-240AI和ARES-241AI还具有64GB内存,在W4A16量化中,可完美支持Llama-70B。借助NVIDIA TAO工具套件,以更小的体积在行人检测、3D姿态估计、DashCamNet、车牌识别等模型架构中提供与英伟达专业显卡T4相似甚至更高的推理性能,这将有助于机器人和智能交通中对实时目标检测与多传感器的结合,同时大大增强定位和目标确认精度。

适用于严苛环境

功能特点

02

ARES-240AI和ARES-241AI坚固耐用,采用强固轻型铝合金材料外壳,传导被动散热,可在温度范围为-20°C ~ 55°C (-4°F ~ 131°F)下稳定工作,具有极端温度环境的耐受性,可以出色应对各类工业环境。此外,小巧的尺寸和轻巧的重量让其操作不受空间限制,非常适用于车载、工业AMR和自主采矿车等应用,其物体检测功能可应用于狭窄的、能见度低的工业环境,并提供智慧物流解决方案。

高度整合智能接口

功能特点

03

为了能完整发挥NVIDIA Jetson AGX Orin的强大计算能力,ARES-240AI和ARES-241AI搭载了许多可应用于垂直市场的功能。两款边缘盒子皆配备了多个USB 3.2接口,以及32/64GB LPDDR5x系统内存、64G eMMC并支持5GWi-Fi和NVMe的M.2 Key,确保外接硬件如摄影机和传感器等可进行快速的信息传输,使其成为理想的智慧零售解决方案。

ARES-240AI区别于ARES-241AI的2个GbE LAN,它具有电源与多功能性相结合的4个PoE LAN端口,可将系统部署在距离其电源更远的地方,并可以通过同一根线缆实现互联网连接和系统的远程监控,从而降低了安装的复杂性,非常适合各种工业自动化场景及自动驾驶领域。

接口展示

产品简介

01

29104a84-a6a7-11ee-9ee2-92fbcf53809c.png

功能 & 区别

产品简介

02

293147e8-a6a7-11ee-9ee2-92fbcf53809c.png

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • ARES
    +关注

    关注

    0

    文章

    3

    浏览量

    9927
  • 研扬科技
    +关注

    关注

    0

    文章

    22

    浏览量

    7680
  • AIGC
    +关注

    关注

    1

    文章

    393

    浏览量

    3270
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI端侧部署开发(SC171开发套件V2-FAS)

    AI端侧部署开发(SC171开发套件V2-FAS) 序列 课程名称 视频课程时长 视频课程链接 课件链接 工程源码 1 Fibo AI Stack模型转化指南 27分19秒 https
    发表于 02-11 11:44

    AI端侧部署开发(SC171开发套件V3)2026版

    AI端侧部署开发(SC171开发套件V3)2026版 序列 课程名称 视频课程时长 视频课程链接 课件链接 工程源码 1 Fibo AI Stack模型转化指南 27分19秒 https
    发表于 01-15 10:31

    AI赋能微电网规划,开启智能新时代

    ,为微电网规划注入了“智慧基因”,推动规划过程从“静态估算”转向“动态预判”,从“单点优化”迈向“全局协同”,开启了微电网智能规划的全新时代
    的头像 发表于 01-05 14:36 503次阅读
    <b class='flag-5'>AI</b>赋能微电网规划,<b class='flag-5'>开启</b>智能<b class='flag-5'>新时代</b>

    AI赋能6G与卫星通信:开启智能天网新时代

    :6G+AI+卫星将支持全息通信,实现真正的\"面对面\"交流 数字孪生卫星:为每颗卫星创建精确的数字模型,用于预测和优化性能 开启智能天网新时代 AI与6G、卫星通信的融合,正在
    发表于 10-11 16:01

    vivo携手Google Cloud推动智能手机迈入AI新时代

    在人们期待更智能、更前瞻手机的时代,vivo 携手 Google Cloud,迅速推出更安全、更前沿的 AI 功能,共同加速创新,推动智能手机迈入智能、无缝、以人为本的 AI 新时代
    的头像 发表于 09-23 16:54 1709次阅读

    适应边缘AI新时代的GPU架构

    电子发烧友网站提供《适应边缘AI新时代的GPU架构.pdf》资料免费下载
    发表于 09-15 16:42 47次下载

    睿海光电:以敏捷交付与全域兼容领跑AI光模块赛道,赋能智算新时代

    睿海光电:以敏捷交付与全域兼容领跑AI光模块赛道,赋能智算新时代
    的头像 发表于 08-15 16:51 1413次阅读

    睿海光电以高效交付与广泛兼容助力AI数据中心800G光模块升级

    核心网络支撑。未来,随着1.6T光模块的落地,睿海光电将进一步推动数据中心向更高性能、更智能化演进,携手全球伙伴开启AI新时代。 睿海光电——AI网络升级的可靠伙伴!
    发表于 08-13 19:01

    AI 边缘计算网关:开启智能新时代的钥匙​—龙兴物联

    流量动态分析、违章行为智能识别;在智慧城市建设里,可检测周界入侵、消防通道占用等安全隐患。 AI 边缘计算网关正以其独特的魅力,为各行业带来前所未有的变革与机遇,引领我们大步迈向智能新时代
    发表于 08-09 16:40

    AI的未来,属于那些既能写代码,又能焊电路的“双栖人才”

    AI模型在MCU/NPU部署的文章互动量增长超300%;嵌入式AI相关问答数量翻倍;PCB+AI+自动控制领域投稿创历史新高。这不是巧合,是时代
    发表于 07-30 16:15

    ai_cube训练模型最后部署失败是什么原因?

    ai_cube训练模型最后部署失败是什么原因?文件保存路径里也没有中文 查看AICube/AI_Cube.log,看看报什么错?
    发表于 07-30 08:15

    小米发布AI眼镜 1999元开启智能穿戴新时代 年轻人的随身AI入口

    1200万高清镜头,可沉浸式拍照、录制视频;支持第三方APP视频通话、直播,实时分享;还可以化身开放式耳机。 据悉小米AI眼镜搭载小米金沙江电池,续航时长达到8.6小时;售价1999元起。1999元就开启智能穿戴新时代;你值得拥
    的头像 发表于 06-27 11:50 1768次阅读

    STM32F769是否可以部署边缘AI

    STM32F769是否可以部署边缘AI
    发表于 06-17 06:44

    迅为RK3576核心板高算力AI开发板开启智能应用新时代

    迅为RK3576核心板高算力AI开发板开启智能应用新时代
    的头像 发表于 06-10 14:13 1840次阅读
    迅为RK3576核心板高算力<b class='flag-5'>AI</b>开发板<b class='flag-5'>开启</b>智能应用<b class='flag-5'>新时代</b>

    爱立信携手沃达丰开启隧道网连新时代

    爱立信近日与沃达丰携手合作,为德国普福尔茨海姆附近的阿林格隧道(Arlinger Tunnel)部署了创新的多频段移动通信天线,开启隧道网连新时代
    的头像 发表于 06-07 09:17 1.5w次阅读