0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MathWorks 宣布 MATLAB 与 NVIDIA TensorRT 集成来加快人工智能应用

西西 作者:厂商供稿 2018-04-11 16:26 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

对比 NVIDIA GPU 上的 TensorFlow,该集成使深度学习推理速度快 5 倍。

中国北京 – 2018 年 4 月 11 日 – MathWorks 今日宣布 ,MATLAB 现在可通过 GPU Coder 实现与 NVIDIA TensorRT 集成。这可以帮助工程师和科学家们在 MATLAB 中开发新的人工智能和深度学习模型,且可确保性能和效率满足数据中心嵌入式应用和汽车应用不断增长的需求。

MATLAB 提供了一个完整的工作流程来快速训练、验证和部署深度学习模型。工程师可以使用 GPU 资源,而无需额外编程操作,因此可以专注于应用本身而不是性能调优。NVIDIA TensorRT 与 GPU Coder 的全新集成使得可以在 MATLAB 中开发深度学习模型,然后以高吞吐量低延迟的方式部署在 NVIDIA GPU 上运行。内部基准测试显示,MATLAB 生成的CUDA代码与 TensorRT 结合,在部署 Alexnet模型进行深度学习推理时,性能比 TensorFlow 高 5 倍;在部署 VGG-16 模型进行深度学习推理时,性能比 TensorFlow 高 1.25 倍。*

“不断发展的图像、语音、传感器物联网IoT) 技术促使团队以更好的性能和效率研究人工智能解决方案。此外,深度学习模型变得越来越复杂。所有这些都给工程师们带来了巨大的压力,” MathWorks 总监 David Rich 说。“现在,团队可以使用 MATLAB 训练深度学习模型,NVIDIA GPU 可以将实时推理部署到从云端到数据中心到嵌入式边界设备等各种环境中。”

* 所有基准测试均在一台使用 NVIDIA TITAN Xp GPU、64GB RAMLinux 12 core Intel® Xeon® E5-1650 v3 电脑上运行,使用的软件包括带 GPU Coder 的 MATLAB R2018a、TensorRT 3.0.1、TensorFlow 1.6.0、CUDA 9.0 和 cuDNN 7

关于 MathWorks

MathWorks 公司是数学计算软件领域世界领先的开发商。它所推出的 MATLAB 是一种用于算法开发、数据分析、可视化和数值计算的程序设计环境,称为“科学计算的语言”。Simulink 是一种图形环境,可用于对多域动态系统和嵌入式系统进行仿真和基于模型设计。全球的工程师和科学家们都依赖于 MathWorks 公司所提供的这些产品家族,来加快在汽车、航空、电子、金融服务、生物医药以及其他行业的发明、创新及开发的步伐。除此之外,MATLAB 和 Simulink 产品还是基础教学和研究工具,为全球众多大学和教学机构所采用。MathWorks 创立于 1984 年,总部位于美国马萨诸塞州内蒂克,在 15 个国家共拥有超过 3500 名员工。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • matlab
    +关注

    关注

    189

    文章

    3018

    浏览量

    237571
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109069
  • MathWorks
    +关注

    关注

    16

    文章

    85

    浏览量

    62061
  • 人工智能
    +关注

    关注

    1813

    文章

    49734

    浏览量

    261453
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA TensorRT LLM 1.0推理框架正式上线

    TensorRT LLM 作为 NVIDIA 为大规模 LLM 推理打造的推理框架,核心目标是突破 NVIDIA 平台上的推理性能瓶颈。为实现这一目标,其构建了多维度的核心实现路径:一方面,针对需
    的头像 发表于 10-21 11:04 747次阅读

    利用超微型 Neuton ML 模型解锁 SoC 边缘人工智能

    的框架小 10 倍,速度也快 10 倍,甚至可以在最先进的边缘设备上进行人工智能处理。在这篇博文中,我们将介绍这对开发人员意味着什么,以及使用 Neuton 模型如何改进您的开发和终端
    发表于 08-31 20:54

    Lambda采用Supermicro NVIDIA Blackwell GPU服务器集群构建人工智能工厂

    人工智能/机器学习、HPC、云、存储和 5G/边缘的整体 IT 解决方案提供商 Super Micro Computer, Inc. (SMCI)今天宣布,超级智能云提供商 Lambda 已部署
    的头像 发表于 08-30 16:55 616次阅读

    人工智能+”行动重磅发布!ElfBoard助力嵌入式教育智能化升级

    8月26日,国务院《关于深入实施“人工智能+”行动的意见》(以下简称《意见》)正式公布,为中国加快推进“人工智能+”提供了重要指引。《意见》提出了加快实施“
    的头像 发表于 08-30 16:07 6104次阅读
    “<b class='flag-5'>人工智能</b>+”行动重磅发布!ElfBoard助力嵌入式教育<b class='flag-5'>智能</b>化升级

    创客总部加入MathWorks加速器计划

    全球领先的数学计算软件开发商 MathWorks 日前宣布,创客总部已加入 MathWorks 加速器计划。作为中关村科创孵化器,创客总部致力于为人工智能创业企业、高校院所技术精英搭建
    的头像 发表于 08-22 10:00 823次阅读

    挖到宝了!人工智能综合实验箱,高校新工科的宝藏神器

    家人们,最近在研究人工智能相关设备,挖到了一款超厉害的宝藏——比邻星人工智能综合实验箱,必须来给大伙分享分享!可☎(壹捌伍 柒零零玖 壹壹捌陆) 一、开箱即学,便捷拉满 这个实验箱真的是为使用者
    发表于 08-07 14:30

    挖到宝了!比邻星人工智能综合实验箱,高校新工科的宝藏神器!

    家人们,最近在研究人工智能相关设备,挖到了一款超厉害的宝藏——比邻星人工智能综合实验箱,必须来给大伙分享分享!可☎(壹捌伍 柒零零玖 壹壹捌陆) 一、开箱即学,便捷拉满 这个实验箱真的是为使用者
    发表于 08-07 14:23

    使用NVIDIA Triton和TensorRT-LLM部署TTS应用的最佳实践

    针对基于 Diffusion 和 LLM 类别的 TTS 模型,NVIDIA Triton 和 TensorRT-LLM 方案能显著提升推理速度。在单张 NVIDIA Ada Lovelace
    的头像 发表于 06-12 15:37 1297次阅读
    使用<b class='flag-5'>NVIDIA</b> Triton和<b class='flag-5'>TensorRT</b>-LLM部署TTS应用的最佳实践

    开售RK3576 高性能人工智能主板

    ,HDMI-4K 输出,支 持千兆以太网,WiFi,USB 扩展/重力感应/RS232/RS485/IO 扩展/I2C 扩展/MIPI 摄像头/红外遥控 器等功能,丰富的接口,一个全新八核拥有超强性能的人工智能
    发表于 04-23 10:55

    Cognizant将与NVIDIA合作部署神经人工智能平台,加速企业人工智能应用

    -Cognizant将与NVIDIA合作部署神经人工智能平台,加速企业人工智能应用 Cognizant将在关键增长领域提供解决方案,包括企业级AI智能体、定制化行业大型语言模型及搭载
    的头像 发表于 03-26 14:42 578次阅读
    Cognizant将与<b class='flag-5'>NVIDIA</b>合作部署神经<b class='flag-5'>人工智能</b>平台,加速企业<b class='flag-5'>人工智能</b>应用

    特朗普宣布5000亿美元人工智能投资计划

    近日,美国人工智能领域迎来重磅消息。美国总统特朗普宣布,OpenAI、软银和甲骨文三家行业巨头正携手推进一项名为 “星际之门”(Stargate)的人工智能基础设施建设计划,总投资预计高达 5000 亿美元。这一举措旨在助力美国
    的头像 发表于 02-05 17:48 957次阅读

    NVIDIA宣布NVIDIA Isaac重要更新

    近期,在备受瞩目的2025年国际消费电子展(CES)上,NVIDIA(英伟达)公司宣布了对NVIDIA Isaac平台的重大更新。这一更新不仅彰显了NVIDIA
    的头像 发表于 01-17 14:45 841次阅读

    MathWorks积极推动MATLAB与Simulink在教学项目中的应用

    全球领先的数学计算软件开发商 MathWorks 今天宣布,其 MATLAB 和 Simulink 平台在中国的高校教育中取得显著成效。随着科技的迅猛发展,国家新质生产力对未来人才提出了更高的创新
    的头像 发表于 12-27 15:32 1295次阅读

    解锁NVIDIA TensorRT-LLM的卓越性能

    NVIDIA TensorRT-LLM 是一个专为优化大语言模型 (LLM) 推理而设计的库。它提供了多种先进的优化技术,包括自定义 Attention Kernel、Inflight
    的头像 发表于 12-17 17:47 1603次阅读

    人工智能应用中的异构集成技术

    引言 2022年ChatGPT的推出推动了人工智能应用的快速发展,促使高性能计算系统需求不断增长。随着传统晶体管缩放速度放缓,半导体行业已转向通过异构集成实现系统级缩放。异构集成技术可将不同类
    的头像 发表于 12-10 10:21 1576次阅读
    <b class='flag-5'>人工智能</b>应用中的异构<b class='flag-5'>集成</b>技术