0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA以RAPIDS为中心进行第三次技术革新浪潮

NVIDIA英伟达 来源:ZYD 2019-02-22 15:52 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

NVIDIA 正在与全球科技巨头和美国顶级超级计算实验室开展合作,为数据分析和机器学习,这一高性能计算发展最为迅猛的领域带来加速支持。

这一新计划标志着高性能计算加速工作迎来了一个关键时刻,预计在未来几年内,高性能计算的市场规模将迎来显著的增长。全球数据量每年都会翻倍,但随着摩尔定律的终结,CPU 计算已遭遇到了瓶颈。

通过与 Microsoft、Cisco、Dell EMC、Hewlett Packard Enterprise、IBM、Oracle 等公司携手,NVIDIA已经为客户实现了50 倍的数据任务加速。根据美国能源部橡树岭国家实验室的初始测试表明,在相关气候预测研究中,所实现的加速效果更是高达215 倍之多。

“激流”般的革新

早在十年前,NVIDIA就已经实现了针对科学计算的加速。从那时起,在我们的帮助下,已有包括多位诺贝尔奖得主在内的众多研究人员成功为其计算密集型模拟实现了加速,从而得以应对一些世界上最为困难的挑战。

随后,也就是五年前,我们通过优化后的软件使GPU平台具备了深度学习加速功能,并就此引发了一场 AI 变革。

NVIDIA于去年推出了新款开源数据科学加速软件,标志着第三次技术革新浪潮的兴起。

此次浪潮以RAPIDS为中心,这是一个开源的数据分析和机器学习加速平台,用于完全在 GPU 上执行端到端的数据科学训练管线。

RAPIDS依赖于NVIDIA CUDA进行低级别计算优化,并通过用户友好型的Python界面实现 GPU 并行结构和极高的内存带宽。RAPIDS 数据框架库可模仿 pandas API,且构建在 Apache Arrow 之上,可以在最大限度上实现互操作性和高性能。

更多加速机器学习步入云端

如今,NVIDIA正在与全球各大领先的技术公司合作,让更多的用户可以在更多的地方享受到加速机器学习带来的便利。

通过与 NVIDIA 的紧密合作,Microsoft 正在为其 Azure Machine Learning 用户提供加速机器学习的服务。

“Azure Machine Learning 是一个领先的平台,帮助数据科学家从云端到终端设备构建、训练、管理并部署机器学习模型。”Microsoft Azure AI 企业副总裁 Eric Boyd 说道,“我们一直在与 NVIDIA 合作,为数据科学家提供由 GPU 提供技术支持的计算能力。此外,我们也很高兴能够通过 RAPIDS 开源项目为 Azure 用户提供软件。我期待着能够看到数据科学社区利用 RAPIDS 和 Azure Machine Learning 取得研究成果。”

更多加速机器学习系统即将问世

同时,NVIDIA也在与基于NVIDIA HGX-2云服务器平台的领先计算机制造商开展合作,共同研发一系列适用于所有 AI 和高性能计算工作负荷的新产品。

通过RAPIDS,数据科学家可以将更多时间用于分析和迭代,并减少等待时间。

NVIDIA HGX-2 可为每个节点提供每秒2 千万亿次浮点运算的计算性能,与仅采用 CPU 的服务器相比,NVIDIA HGX-2 运行机器学习工作负荷的速度要快上近550 倍。

加速机器学习赋能科学突破

美国多家领先实验室所从事的研究课题包括核聚变研究、人类基因组学,和气候预测在内的各个领域,这些研究工作均依赖于科学计算、深度学习和数据科学。

NVIDIA DGX-2旨在应对需要处理海量计算的应用,帮助科研人员在对性能要求最高的领域里取得性能突破。DGX-2 可以与 RAPIDS 开源机器学习软件配合使用,其现已帮助多家美国能源部实验室的科学家加速了他们的研究进程。

其中,美国橡树岭国家实验室的研究人员已经借助 DGX-2 和 RAPIDS 取得了早期成果。

如今,研究人员可以利用体量庞大的观察数据来构建模型,从而增强与气候模拟相关的能源安全应用。然而在过去,利用气候数据集进行训练的机器学习算法一直受到计算性能的制约,且训练过程非常缓慢。但现在,改变终于来了。

借助 DGX-2 和 RAPIDS,橡树岭国家实验室的研究人员已经大大提升了在大型数据集上应用机器学习的速度。他们在 DGX-2 上运行XGBoost,将大小为224GB的模型训练用时从在CPU节点上所需的21 个小时,缩短至仅6 分钟,实现了215倍的加速。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5685

    浏览量

    110111
  • DGX-2
    +关注

    关注

    0

    文章

    4

    浏览量

    6859

原文标题:NVIDIA携加速数据科学再掀高性能计算革新浪潮

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    海康威视参加城市生命线工程物联设备检测认证规范团体标准第三次研讨会

    近日,海康威视作为参编单位承办的《城市生命线工程物联设备检测认证规范》团体标准第三次研讨会在杭州总部顺利召开。本次会议采取实地调研+座谈研讨的形式举行,来自中国城市科学研究会、全国智标委、清华大学
    的头像 发表于 04-21 11:30 391次阅读

    2025年度深圳市集成电路产业总结大会暨深圳市半导体行业协会第八届第三次会员大会圆满举办

    2026年1月16日,2025年度深圳市集成电路产业总结大会暨深圳市半导体行业协会第八届第三次会员大会在南山区科兴国际会议中心隆重举办。来自政府主管部门、会员企业、科研机构、投资机构及行业协会
    的头像 发表于 01-18 13:00 1234次阅读
    2025年度深圳市集成电路产业总结大会暨深圳市半导体行业协会第八届<b class='flag-5'>第三次</b>会员大会圆满举办

    国芯科技3000万元第三次增资龙擎视芯

    近日,国芯科技3000万元参与苏州龙擎视芯集成电路有限公司(以下简称“龙擎视芯”)Pre-A轮融资。这是继天使轮、天使+轮后,国芯科技第三次增资龙擎视芯。本轮融资完成后,国芯科技合计持有龙擎视芯8.97%的股权,成为龙擎视芯除团队外的外部第一大股东。
    的头像 发表于 12-15 11:44 1119次阅读

    TCP的三次握手

    ,Server进入SYN_RCVD状态。 (3)第三次握手:Client收到确认后,检查ack是否J+1,ACK是否1,如果正确则将标志位ACK置1,ack=K+1,并将该数据包
    发表于 12-02 07:16

    从电网到栅极:赋能第三次能源革命

    开启。随后在美国发生了第二能源革命,20 世纪石油产业的繁荣推动了汽车和电力领域取得前所未有的进步。 如今,人工智能 (AI) 的快速发展正在引领第三次能源革命,涵盖产生、转换和分配我们正在消耗的大量数据提供动力所需的能源。
    的头像 发表于 11-14 10:19 754次阅读
    从电网到栅极:赋能<b class='flag-5'>第三次</b>能源革命

    Melexis MLX91218斩获2025金辑奖最佳技术实践应用奖

    在2025年全球电驱动技术革新浪潮中,Melexis旗下IMC-Hall电流传感器芯片MLX91218凭借其革命性设计与跨领域应用潜力,从众多创新产品中脱颖而出,荣获盖世汽车金辑奖2025最佳技术
    的头像 发表于 11-04 10:33 569次阅读

    集创北方出席LED TCON团体标准发展第三次技术研讨会

    近日,由中国光学光电子行业协会发光二极管显示应用分会(简称中国光协LED显示应用分会)主办,北京集创北方科技股份有限公司(简称集创北方)承办的“《基于TCON方案的LED显示接口及通讯协议规范》团体标准第三次技术研讨会”在集创北方深圳园区圆满举行。
    的头像 发表于 08-16 16:19 1778次阅读

    第12届NVIDIA Sky Hackathon精彩回顾

    作为 NVIDIA 开发者社区的年度技术盛事,第 12 届 Sky Hackathon 刚刚落下帷幕,但其带来的技术创新浪潮却远未结束。42 支优秀团队,39 个完整项目,这背后是无数开发者挥洒的汗水和闪耀的智慧。
    的头像 发表于 08-05 16:26 1192次阅读

    华为连续第三次入选Gartner®企业有线无线局域网基础设施魔力象限领导者

    and Wireless LAN Infrastructure),华为连续第三次入选领导者象限,是入选该象限的唯一非北美厂商。   华为入选2025年Gartner企业有线无线局域网基础设施魔力象限领导者 AI时代
    的头像 发表于 06-28 18:54 5796次阅读

    安光电第一届第三次化合物半导体技术研讨会成功举办

    近日,由安学院主办,人资中心技术中心、总经办协办的安光电第一届第三次化合物半导体
    的头像 发表于 06-27 17:09 1149次阅读

    舜宇车载光学召开车载激光雷达团体标准第三次会议

    近日,由舜宇车载光学牵头的《车载激光雷达典型光学器件可靠性要求及检测方法》团体标准第三次工作组会议在浙江省余姚市召开。
    的头像 发表于 06-20 09:31 1225次阅读

    洲明照明模组光效突破266lm/W

    在“双碳”战略持续推进的大背景下,户外照明行业正迎来高效能、低能耗核心的技术革新浪潮
    的头像 发表于 06-11 16:09 947次阅读

    耐能KNEO Pi开发板的技术革新

    在万物互联与AI普惠化的浪潮中,边缘计算正成为技术革新的核心战场。 传统开发板受限于算力、功耗与生态封闭性,难以满足实时AI推理与工业级部署的需求。
    的头像 发表于 06-06 09:58 1292次阅读

    信创浪潮下,国产主板有什么新的发展机遇?

    在信息技术应用创新浪潮的推动下,国产主板迎来了诸多新的发展机遇。信创产业旨在实现信息技术领域的自主可控,这一战略目标国产主板的发展提供了广阔的空间。信创
    的头像 发表于 05-09 09:24 867次阅读
    信创<b class='flag-5'>浪潮</b>下,国产主板有什么新的发展机遇?

    TCP三次握手和四挥手,这样解释太通俗易懂了!

    TCP连接的建立和释放分别通过“三次握手”和“四挥手”来完成。三次握手过程TCP三次握手是建立可靠网络连接的关键过程,它用于确保通信双方能够正常发送和接收数据,并提供可靠的数据传输机
    的头像 发表于 04-24 19:33 1678次阅读
    TCP<b class='flag-5'>三次</b>握手和四<b class='flag-5'>次</b>挥手,这样解释太通俗易懂了!