0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

拯救环境:加速分析推动降本减排

NVIDIA英伟达 来源:未知 2023-09-19 11:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

适用于 Apache Spark 的 RAPIDS 加速器可以帮助公司提升性能并保护环境。

各大公司正在研究加速计算如何能提升它们的基准性能,同时还能给地球带来积极影响。

适用于 Apache Spark 的 NVIDIA RAPIDS 加速器软件可以加速数据分析,不仅能提升性能、降低成本,还可以提升能效。这意味着它可以帮助公司实现温室气体(如二氧化碳)零排放的目标。

一项新的基准测试表明,RAPIDS 加速器能让一家公司减少多达 80% 碳足迹,同时将计算速度平均提升五倍,计算成本降低 4 倍。

许多公司都能从这一技术中获益。包括 80% 的世界五百强在内的数千家公司,都在采用 Apache Spark 来分析它们日益增长的数据。

事实上,如果每家采用 Apache Spark 的公司都使用 RAPIDS 加速器,他们每年可共计减少 7.8 公吨的二氧化碳排放,减排效果相当于一辆车使用 878 加仑汽油所产生的排放量。这很好地证明了绿色计算科技能够对抗气候变化。

人类面临的挑战

据联合国,超过 70 个国家已经为温室气体排放设定了一个净零目标。联合国将“向净零排放转型”描述为“人类目前面临的最大的挑战之一”。

许多公司正在为此做出自身的贡献。

例如,NVIDIA 正在与一家大型金融服务公司合作,测试将 Apache Spark 应用到实时欺诈保护中。该公司希望借助加速计算降低碳足迹,并与 Net-Zero Banking Alliance 等组织通力合作。

5月份,世界上最大的 AI 超级计算机之一证实了加速计算能提高能效。

在四个热门的科学应用中,位于美国国家能源研究科学计算中心(NERSC)的 Perlmutter 系统的能效平均提升了五倍,这要归功于 NVIDIA A100 Tensor Core GPU 。与使用 CPU 相比,一个天气预报应用实现了 9.8 倍加速。

wKgZomULHgqAdvdxAABizO1FVz4333.jpg

NERSC 应用程序通过加速计算实现了效率提升

AT&T 接入 RAPIDS 加速器

美国电话电报公司(AT&T)、Adobe 和美国联邦税务局(IRS)等组织已经发现了 RAPIDS 加速器的性能和成本优势。

在去年的一次测试中,AT&T 仅用五个小时就处理了一个月的移动数据——足有 2.8 万亿行信息。这比以往的任何测试都要快 3.3 倍,而成本降低了 60%。

AT&T 的 AI 架构师 Abhay Dabholkar 在一篇博客中写道:“这一结果令人振奋,因为如果是用 CPU 集群,仅仅是七天的数据就需要处理超过 48 小时——曾经,我们手握数据,但却由于处理时间太长而无法使用它。”

“如果一项任务耗时太长,而且数据太多,那么我们建议转向 GPU ,并借助 Spark ,CPU 上运行的代码也可以在 GPU 上运行。”他补充说。

Adobe 加速服务

Adobe 在其 Intelligent Services 平台上使用了加速计算,帮助市场营销团队用 AI 来加速分析。

他们发现,使用 RAPIDS 加速器时,单个 NVIDIA GPU 节点的性能可以比 16 个节点的 CPU 集群高出 33% ,同时将计算成本降低 70% 。

在另一个训练 AI 模型的测试中,使用搭载 GPU 加速的RAPIDS 库将速度提高了 7 倍,与在 CPU 上运行的同一任务相比,其成本节省了 90% 。

Adobe 的机器学习工程师张磊在 GTC 大会发表的演讲中表示:“这能极大节省成本,提升速度,真是令人震惊。”

Spark 带来 20 倍的提升

CPU 的性能不足以处理分析所需的 3TB 以上的数据集,因此 IRS 转向了 RAPIDS 加速器

一个由 GPU 驱动的服务器组成的 Spark 集群能够处理这些数据负载,并为处理更大的数据集开启了一扇门。

IRS 研究和应用分析与统计部门技术主管 Joe Ansaldi 在一篇博客中表示:“我们目前正在实施这一整合,我们的数据工程和数据科学工作流程以一半的成本实现了超过 20 倍的速度提升。”

如何迈出第一步

升性能和减少成本的程度在不同的工作负载中有所不同。正因为此,NVIDIA 推出了一款加速的 Spark 分析工具。

该工具向用户展示了 RAPIDS 加速器在无需更改任何代码的情况下,在他们的应用程序上可以实现怎样的提升。该工具还能帮助用户对 GPU 加速进行微调,以在他们的工作负载上获得最佳效果。

一旦 RAPIDS 加速器提高了关键性能,公司就可以计算节省的能源,并报告他们在保护地球方面所取得的进展。

观看下方视频以了解 Cloudera 数据平台如何用适用于 Apache Spark 的 RAPIDS 加速器提速 44 倍。

GTC 2024 将于 2024 年 3 月 18 至 21 日在美国加州圣何塞会议中心举行,线上大会也将同期开放。点击“阅读原文”扫描下方海报二维码,关注更多会议及活动信息。

wKgZomULHgqAfuWJAAFtccdApf0928.jpg


原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4040

    浏览量

    97680

原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    安达发|APS自动单软件:金属加工厂的“智慧大脑”

    产方式,正让企业在激烈的市场竞争中陷入被动。而 APS自动单软件 的出现,正以其卓越的智能化能力,成为推动金属加工企业迈向“智造”升级的核心驱动力。 一、金属加工行业的生产管
    的头像 发表于 11-25 14:17 158次阅读
    安达发|APS自动<b class='flag-5'>排</b>产<b class='flag-5'>排</b>程<b class='flag-5'>排</b>单软件:金属加工厂的“智慧大脑”

    航空的精准刻度:航空发动机全生命周期碳排放计量与路径探析

    国际民航组织(ICAO)联合193个成员国提出2050年净零放目标,这一承诺在2025年的ICAO第42届大会上得到重申,各成员国确认了对实现国际航空净零碳排放的坚定承诺。
    的头像 发表于 11-04 11:20 306次阅读
    航空<b class='flag-5'>减</b><b class='flag-5'>排</b>的精准刻度:航空发动机全生命周期碳排放计量与<b class='flag-5'>减</b><b class='flag-5'>排</b>路径探析

    源网荷储+碳管控!安科瑞助力乡村零碳发展

    的核心抓手。作为全国碳体系的重要组成部分,乡村承载着农业生产、生态涵养的双重使命,但其传统能源依赖、生产方式粗放、基础设施薄弱等问题,既制约着自身发展质量,也影响着国家“双碳”目标的整体推进。零碳乡村建设并非简单的“降碳
    的头像 发表于 11-04 09:45 147次阅读
    源网荷储+碳<b class='flag-5'>排</b>管控!安科瑞助力乡村零碳发展

    再落两子!晶映签约湖州、临沂代理商,节能版图加速扩张

    晶映节能签约湖州、临沂代理商,以 “节能 + 智能” 产品适配两地产业需求,加速布局长三角与鲁南,助力企业降本碳,共拓绿色市场。
    的头像 发表于 10-26 18:08 762次阅读
    再落两子!晶映签约湖州、临沂代理商,节能版图<b class='flag-5'>加速</b>扩张

    碳排放排量数据采集物联网解决方案

    CCER(核证自愿排量)指“对我国境内可再生能源、林业碳汇、甲烷利用等项目的温室气体效果进行量化核证,并在国家温室气体自愿交易注册
    的头像 发表于 09-26 17:28 1186次阅读
    碳排放<b class='flag-5'>减</b>排量数据采集物联网解决方案

    什么是零碳工厂?微电网能源管理平台助力工厂运营“净零放” !

    引言: 在全球“碳中和”浪潮与中国“双碳”目标的推动下,制造业正经历一场从高碳向低碳、零碳转型的深刻变革。零碳工厂作为工业脱碳的核心载体,不仅承载着环境责任,更成为企业提升竞争力、规避碳关税壁垒
    的头像 发表于 09-01 17:52 594次阅读
    什么是零碳工厂?微电网能源管理平台助力工厂运营“净零<b class='flag-5'>排</b>放” !

    MediaTek碳目标通过SBTi审核

    联合国全球契约组织(UNGC)共同发起的一项全球倡议,目标是确保企业的碳路径与《巴黎协定》保持一致,即将全球升温控制在 1.5°C 以内。
    的头像 发表于 08-18 14:36 672次阅读

    安科瑞光储充一体化解决方案如何给企业降本

    电子发烧友网站提供《安科瑞光储充一体化解决方案如何给企业降本碳.docx》资料免费下载
    发表于 07-16 15:42 0次下载

    FORVIA佛瑞亚中国如何推进采购端的工作

    作为全球首个净零放目标获科学碳目标倡议组织(SBTi)批准的汽车科技企业,FORVIA佛瑞亚集团已在中国区取得亮眼成绩——提前实现“范围一”和“范围二”排放量降低80%(与2019年相比),并全力朝着于2045年实现净零放的承诺前进。
    的头像 发表于 06-19 13:40 787次阅读

    CSD船用变压器岸电应用:为何成港口神器?

    “船舶靠港时冒黑烟,港口被罚环保税怎么办?”这是全球港口运营商的切肤之痛。随着IMO限硫令升级,岸电系统成为船舶的终极方案,而CSD船用隔离变压器正是这套系统的“心脏”。但问题来了:它如何在盐雾
    的头像 发表于 05-29 00:00 504次阅读
    CSD船用变压器岸电应用:为何成港口<b class='flag-5'>减</b><b class='flag-5'>排</b>神器?

    华为推动汽车电动化产业高质量发展

    此前,3月28-30日,中国电动汽车百人会论坛(2025)在北京召开,华为董事、华为数字能源总裁侯金龙在会上,发表了主题为“打造交能融合的兆瓦超充基础设施,加速重卡电动化,实现物流行业大规模降本碳”的演讲。
    的头像 发表于 04-01 15:42 639次阅读

    VOCs工业气体监测物联网系统方案

    的监测与治理成为环境治理的重中之重。随着国家对大气污染防治力度的不断加大,对VOCs的排放监管也提出了更高要求,同时也给予很多优惠政策。 《广东省大气污染物财政激励实施方案》相关要求,以及《深圳市大气
    的头像 发表于 03-19 15:54 470次阅读

    站远程监控物联网解决方案

    有力支持,使得电力行业能够更高效、智能地管理电站。 痛点分析 1、一些电站位于偏远或环境复杂的地区,传统的有线网络部署方式难以实现,往往需要派人值守,成本较高。 2、人工巡检记录数
    的头像 发表于 03-10 14:14 641次阅读
    电<b class='flag-5'>排</b>站远程监控物联网解决方案

    碳交易风口,企业如何用智慧能源杠杆撬动红利?

    易允恒 安科瑞电气股份有限公司 一、碳交易机制驱动下的企业绿色转型新需求 全球气候变化背景下,碳交易作为市场化工具,正加速企业低碳化进程。青岛市作为全国碳市场建设的先行者,通过碳配额交易与金融
    的头像 发表于 03-03 17:04 623次阅读

    电磁环境监控与分析系统

    智慧华盛恒辉电磁环境监控与分析系统是一种综合性的技术平台,旨在实时监测、分析和评估电磁环境的动态变化。以下是对该系统的详细阐述: 智慧华盛恒辉电磁
    的头像 发表于 02-14 16:54 660次阅读
    电磁<b class='flag-5'>环境</b>监控与<b class='flag-5'>分析</b>系统