0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

拯救环境:加速分析推动降本减排

NVIDIA英伟达 来源:未知 2023-09-19 11:10 次阅读

适用于 Apache Spark 的 RAPIDS 加速器可以帮助公司提升性能并保护环境。

各大公司正在研究加速计算如何能提升它们的基准性能,同时还能给地球带来积极影响。

适用于 Apache Spark 的 NVIDIA RAPIDS 加速器软件可以加速数据分析,不仅能提升性能、降低成本,还可以提升能效。这意味着它可以帮助公司实现温室气体(如二氧化碳)零排放的目标。

一项新的基准测试表明,RAPIDS 加速器能让一家公司减少多达 80% 碳足迹,同时将计算速度平均提升五倍,计算成本降低 4 倍。

许多公司都能从这一技术中获益。包括 80% 的世界五百强在内的数千家公司,都在采用 Apache Spark 来分析它们日益增长的数据。

事实上,如果每家采用 Apache Spark 的公司都使用 RAPIDS 加速器,他们每年可共计减少 7.8 公吨的二氧化碳排放,减排效果相当于一辆车使用 878 加仑汽油所产生的排放量。这很好地证明了绿色计算科技能够对抗气候变化。

人类面临的挑战

据联合国,超过 70 个国家已经为温室气体排放设定了一个净零目标。联合国将“向净零排放转型”描述为“人类目前面临的最大的挑战之一”。

许多公司正在为此做出自身的贡献。

例如,NVIDIA 正在与一家大型金融服务公司合作,测试将 Apache Spark 应用到实时欺诈保护中。该公司希望借助加速计算降低碳足迹,并与 Net-Zero Banking Alliance 等组织通力合作。

5月份,世界上最大的 AI 超级计算机之一证实了加速计算能提高能效。

在四个热门的科学应用中,位于美国国家能源研究科学计算中心(NERSC)的 Perlmutter 系统的能效平均提升了五倍,这要归功于 NVIDIA A100 Tensor Core GPU 。与使用 CPU 相比,一个天气预报应用实现了 9.8 倍加速。

wKgZomULHgqAdvdxAABizO1FVz4333.jpg

NERSC 应用程序通过加速计算实现了效率提升

AT&T 接入 RAPIDS 加速器

美国电话电报公司(AT&T)、Adobe 和美国联邦税务局(IRS)等组织已经发现了 RAPIDS 加速器的性能和成本优势。

在去年的一次测试中,AT&T 仅用五个小时就处理了一个月的移动数据——足有 2.8 万亿行信息。这比以往的任何测试都要快 3.3 倍,而成本降低了 60%。

AT&T 的 AI 架构师 Abhay Dabholkar 在一篇博客中写道:“这一结果令人振奋,因为如果是用 CPU 集群,仅仅是七天的数据就需要处理超过 48 小时——曾经,我们手握数据,但却由于处理时间太长而无法使用它。”

“如果一项任务耗时太长,而且数据太多,那么我们建议转向 GPU ,并借助 Spark ,CPU 上运行的代码也可以在 GPU 上运行。”他补充说。

Adobe 加速服务

Adobe 在其 Intelligent Services 平台上使用了加速计算,帮助市场营销团队用 AI 来加速分析。

他们发现,使用 RAPIDS 加速器时,单个 NVIDIA GPU 节点的性能可以比 16 个节点的 CPU 集群高出 33% ,同时将计算成本降低 70% 。

在另一个训练 AI 模型的测试中,使用搭载 GPU 加速的RAPIDS 库将速度提高了 7 倍,与在 CPU 上运行的同一任务相比,其成本节省了 90% 。

Adobe 的机器学习工程师张磊在 GTC 大会发表的演讲中表示:“这能极大节省成本,提升速度,真是令人震惊。”

Spark 带来 20 倍的提升

CPU 的性能不足以处理分析所需的 3TB 以上的数据集,因此 IRS 转向了 RAPIDS 加速器

一个由 GPU 驱动的服务器组成的 Spark 集群能够处理这些数据负载,并为处理更大的数据集开启了一扇门。

IRS 研究和应用分析与统计部门技术主管 Joe Ansaldi 在一篇博客中表示:“我们目前正在实施这一整合,我们的数据工程和数据科学工作流程以一半的成本实现了超过 20 倍的速度提升。”

如何迈出第一步

升性能和减少成本的程度在不同的工作负载中有所不同。正因为此,NVIDIA 推出了一款加速的 Spark 分析工具。

该工具向用户展示了 RAPIDS 加速器在无需更改任何代码的情况下,在他们的应用程序上可以实现怎样的提升。该工具还能帮助用户对 GPU 加速进行微调,以在他们的工作负载上获得最佳效果。

一旦 RAPIDS 加速器提高了关键性能,公司就可以计算节省的能源,并报告他们在保护地球方面所取得的进展。

观看下方视频以了解 Cloudera 数据平台如何用适用于 Apache Spark 的 RAPIDS 加速器提速 44 倍。

GTC 2024 将于 2024 年 3 月 18 至 21 日在美国加州圣何塞会议中心举行,线上大会也将同期开放。点击“阅读原文”扫描下方海报二维码,关注更多会议及活动信息。

wKgZomULHgqAfuWJAAFtccdApf0928.jpg


原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3329

    浏览量

    87774

原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    降本空间何寻?瑞能串联化成分容系统可实现年降本400万

    在一条2GWh 280Ah产线中,瑞能串联化成分容系统可实现年降本400万。
    的头像 发表于 12-28 09:53 460次阅读
    <b class='flag-5'>降本</b>空间何寻?瑞能串联化成分容系统可实现年<b class='flag-5'>降本</b>400万

    采集到的ADIS16477-2的imu数据,测试陀螺、加速度计的漂移非常大怎么解决?

    我现在采集到的ADIS16477-2的imu数据,测试陀螺、加速度计的漂移非常大,IMU是放在台面上镜子不动的。 下图第一陀螺x、y、z的原始数据,第二分别是5s钟平滑后的数据。 下图第一
    发表于 12-28 07:25

    智佳能:锂电智造升级与降本增效

    要拿到新能源新赛段的入场券,对于装备企业而言,一是要装备本身降本,二是产线投资降本,三是赋能电池在生产运营中长期降本
    的头像 发表于 12-13 10:54 523次阅读

    在CCES环境下如何使用21489的IIR加速器?

    在VDSP++的环境下程序已经实现,但是到了CCES下,把中断初始化函数修改了,还是无法正确配置中断,直接返回IIR的中断初始化失败,请问CCES下怎么使用IIR加速器?
    发表于 11-30 08:20

    推动N型电池高效发展 | 美能光伏与您共赴世界光伏之都!

    自“碳中和”的战略大计全面部署之后,“降本增速、科技创新”就成为了光伏行业的主旋律,各企业为达到此目标,无不煞费苦心地推动光伏电池效率向极限进发。「美能光伏」作为光伏行业中的一员,为了坚守碳中和
    的头像 发表于 11-21 08:33 238次阅读
    <b class='flag-5'>推动</b>N型电池高效发展 | 美能光伏与您共赴世界光伏之都!

    降本高压下,锂电核心装备“应对”与“出路”

    降本高压下,锂电设备企业如何穿越漫漫周期?
    的头像 发表于 11-01 10:47 321次阅读

    修复 PCB 板擦花,轻松拯救你的电子设备

    修复 PCB 板擦花,轻松拯救你的电子设备
    的头像 发表于 09-25 09:57 917次阅读

    工业物联网如何实现降本、升效、提质、安全、绿色

    、升效、提质、安全、绿色 降本: 1. 通过数据采集,实现设备状态实时监测和远程故障预警,提高设备利用率和效率,减少生产停工、维修和更换设备的成本; 2. 通过数据分析和预测,优化供应链和生产流程,降低库存成本和生产成本; 3. 运用
    的头像 发表于 09-21 14:34 326次阅读

    一款动车组用加速度传感器结构设计和仿真

    ,保证行车安全。通过对标准动车组 tNetrol-NAMC1-10-IC 型加速度传感器工作环境进行分析,阐述了其结构设计的思想和方法,对结构强度方面进行了有限元仿真分析,并结合长寿命
    发表于 09-18 07:09

    使用第4代Intel RXeon R可扩展处理器和lntelRAMX加速VMware vSAN上的所有工作负载

    推动业务的改进和成果。 虽然人工智能(Al)是vSAN上的一个新兴用例,但Aland深度学习(DL)的发展速度意味着它们很快就会被构建到几乎所有的企业应用程序和分析工具中。今天的vSAN用户在他
    发表于 08-04 06:48

    2023世亚数博会,世亚软博会,加速推动数字产业“生根开花”

    2023世亚数博会,世亚软博会,加速推动数字产业“生根开花”
    的头像 发表于 06-25 10:04 367次阅读
    2023世亚数博会,世亚软博会,<b class='flag-5'>加速</b><b class='flag-5'>推动</b>数字产业“生根开花”

    世界环境日 | AI 和加速计算驱动环境保护之路

    的气候模型,并通过卫星图像监测环境灾害。 世界环境日,跟随本文探索 AI 和加速计算推动 可持续性、气候科学和能源效率 的关键方式。 将 AI 应用于保护生物多样性、 及可持续农业发展
    的头像 发表于 06-07 08:35 249次阅读
    世界<b class='flag-5'>环境</b>日 | AI 和<b class='flag-5'>加速</b>计算驱动<b class='flag-5'>环境</b>保护之路

    虹科方案 | 适用于高压环境或潜在爆炸性环境加速度计解决方案

    ————虹科&Micronor——————虹科方案——适用于高压环境或潜在爆炸环境加速度计系统纯光学无源设计|应用于各种恶劣环境PART1加速
    的头像 发表于 05-11 10:17 315次阅读
    虹科方案 | 适用于高压<b class='flag-5'>环境</b>或潜在爆炸性<b class='flag-5'>环境</b>的<b class='flag-5'>加速</b>度计解决方案

    虹科方案|适用于高压环境或潜在爆炸性环境加速度计系统

    在存在高电压或有爆炸危险的区域进行振动测量对技术的要求很高,在这种环境中传统的测量系统通常不能工作或不够可靠。虹科MICRONOR拥有基于无源光纤技术的特殊加速度测量系统,这特别适用于高压环境或潜在爆炸性
    的头像 发表于 05-11 09:35 270次阅读

    概伦电子与阿里云深化合作加速推动EDA上云

    概伦电子与阿里云深化合作加速推动EDA上云 EDA号称芯片之母现在也要上云了。根据概伦电子官微发布的消息显示,概伦电子一直致力于推进EDA上云,概伦电子将与阿里云持续深化合作,加速推动
    的头像 发表于 05-05 17:25 1718次阅读