0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

拯救环境:加速分析推动降本减排

NVIDIA英伟达 来源:未知 2023-09-19 11:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

适用于 Apache Spark 的 RAPIDS 加速器可以帮助公司提升性能并保护环境。

各大公司正在研究加速计算如何能提升它们的基准性能,同时还能给地球带来积极影响。

适用于 Apache Spark 的 NVIDIA RAPIDS 加速器软件可以加速数据分析,不仅能提升性能、降低成本,还可以提升能效。这意味着它可以帮助公司实现温室气体(如二氧化碳)零排放的目标。

一项新的基准测试表明,RAPIDS 加速器能让一家公司减少多达 80% 碳足迹,同时将计算速度平均提升五倍,计算成本降低 4 倍。

许多公司都能从这一技术中获益。包括 80% 的世界五百强在内的数千家公司,都在采用 Apache Spark 来分析它们日益增长的数据。

事实上,如果每家采用 Apache Spark 的公司都使用 RAPIDS 加速器,他们每年可共计减少 7.8 公吨的二氧化碳排放,减排效果相当于一辆车使用 878 加仑汽油所产生的排放量。这很好地证明了绿色计算科技能够对抗气候变化。

人类面临的挑战

据联合国,超过 70 个国家已经为温室气体排放设定了一个净零目标。联合国将“向净零排放转型”描述为“人类目前面临的最大的挑战之一”。

许多公司正在为此做出自身的贡献。

例如,NVIDIA 正在与一家大型金融服务公司合作,测试将 Apache Spark 应用到实时欺诈保护中。该公司希望借助加速计算降低碳足迹,并与 Net-Zero Banking Alliance 等组织通力合作。

5月份,世界上最大的 AI 超级计算机之一证实了加速计算能提高能效。

在四个热门的科学应用中,位于美国国家能源研究科学计算中心(NERSC)的 Perlmutter 系统的能效平均提升了五倍,这要归功于 NVIDIA A100 Tensor Core GPU 。与使用 CPU 相比,一个天气预报应用实现了 9.8 倍加速。

wKgZomULHgqAdvdxAABizO1FVz4333.jpg

NERSC 应用程序通过加速计算实现了效率提升

AT&T 接入 RAPIDS 加速器

美国电话电报公司(AT&T)、Adobe 和美国联邦税务局(IRS)等组织已经发现了 RAPIDS 加速器的性能和成本优势。

在去年的一次测试中,AT&T 仅用五个小时就处理了一个月的移动数据——足有 2.8 万亿行信息。这比以往的任何测试都要快 3.3 倍,而成本降低了 60%。

AT&T 的 AI 架构师 Abhay Dabholkar 在一篇博客中写道:“这一结果令人振奋,因为如果是用 CPU 集群,仅仅是七天的数据就需要处理超过 48 小时——曾经,我们手握数据,但却由于处理时间太长而无法使用它。”

“如果一项任务耗时太长,而且数据太多,那么我们建议转向 GPU ,并借助 Spark ,CPU 上运行的代码也可以在 GPU 上运行。”他补充说。

Adobe 加速服务

Adobe 在其 Intelligent Services 平台上使用了加速计算,帮助市场营销团队用 AI 来加速分析。

他们发现,使用 RAPIDS 加速器时,单个 NVIDIA GPU 节点的性能可以比 16 个节点的 CPU 集群高出 33% ,同时将计算成本降低 70% 。

在另一个训练 AI 模型的测试中,使用搭载 GPU 加速的RAPIDS 库将速度提高了 7 倍,与在 CPU 上运行的同一任务相比,其成本节省了 90% 。

Adobe 的机器学习工程师张磊在 GTC 大会发表的演讲中表示:“这能极大节省成本,提升速度,真是令人震惊。”

Spark 带来 20 倍的提升

CPU 的性能不足以处理分析所需的 3TB 以上的数据集,因此 IRS 转向了 RAPIDS 加速器

一个由 GPU 驱动的服务器组成的 Spark 集群能够处理这些数据负载,并为处理更大的数据集开启了一扇门。

IRS 研究和应用分析与统计部门技术主管 Joe Ansaldi 在一篇博客中表示:“我们目前正在实施这一整合,我们的数据工程和数据科学工作流程以一半的成本实现了超过 20 倍的速度提升。”

如何迈出第一步

升性能和减少成本的程度在不同的工作负载中有所不同。正因为此,NVIDIA 推出了一款加速的 Spark 分析工具。

该工具向用户展示了 RAPIDS 加速器在无需更改任何代码的情况下,在他们的应用程序上可以实现怎样的提升。该工具还能帮助用户对 GPU 加速进行微调,以在他们的工作负载上获得最佳效果。

一旦 RAPIDS 加速器提高了关键性能,公司就可以计算节省的能源,并报告他们在保护地球方面所取得的进展。

观看下方视频以了解 Cloudera 数据平台如何用适用于 Apache Spark 的 RAPIDS 加速器提速 44 倍。

GTC 2024 将于 2024 年 3 月 18 至 21 日在美国加州圣何塞会议中心举行,线上大会也将同期开放。点击“阅读原文”扫描下方海报二维码,关注更多会议及活动信息。

wKgZomULHgqAfuWJAAFtccdApf0928.jpg


原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4115

    浏览量

    99628

原文标题:拯救环境:加速分析推动降本减排

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    零碳园区的碳效果评估指标有哪些?

    效果评估是零碳园区建设的关键环节,而科学完善的评估指标体系则是精准量化降碳成效、优化转型路径的核心依据。零碳园区的碳效果评估需突破传统园区单一能耗指标的局限,立足“全链条覆盖
    的头像 发表于 03-10 13:38 858次阅读
    零碳园区的碳<b class='flag-5'>减</b><b class='flag-5'>排</b>效果评估指标有哪些?

    千方集团持续推动公路货运实现降本增效

    公路货运作为我国物流体系的支柱,是推动全社会物流降本增效的关键领域。千方集团通过整合“车、路、货、能、运”等关键要素资源,构建了完整的产业生态,并通过智能化升级与全局优化,持续推动公路货运实现
    的头像 发表于 01-26 10:18 664次阅读

    市政雨污口流量监测设备技术分析

    市政雨污口流量监测是城市水环境治理与排水管网运维的核心环节,精准的流量数据能够为雨污分流改造、防汛排涝调度、污染物溯源提供科学支撑。流量监测设备作为数据采集的核心载体,其技术性能直接决定监测工作
    的头像 发表于 01-09 12:09 303次阅读
    市政雨污<b class='flag-5'>排</b>口流量监测设备技术<b class='flag-5'>分析</b>

    一套系统管全厂:设备 + 能源 + 资产,智能工厂降本 30%

    工业数字化转型核心是用数据打通管理堵点。当设备、能源、资产协同优化,降本30%便从目标变为必然。这不仅是成本优化,更是制造企业核心竞争力的提升——在利润压缩的市场环境中,精细化管理带来的降本增效,正是穿越周期的底气。
    的头像 发表于 12-30 09:42 316次阅读
    一套系统管全厂:设备 + 能源 + 资产,智能工厂<b class='flag-5'>降本</b> 30%

    宏集案例 | 支持显示海康与大华摄像头监控画面!eX700系列HMI助力船用电池储能系统满足CCS最新规范要求

    %的贸易依赖海运,行业压力与日俱增。国际海事组织(IMO)提出的2030/2050目标,正推动船舶向电力与混合动力推进
    的头像 发表于 11-25 17:01 748次阅读
    宏集案例 | 支持显示海康与大华摄像头监控画面!eX700系列HMI助力船用电池储能系统满足CCS最新规范要求

    安达发|APS自动单软件:金属加工厂的“智慧大脑”

    产方式,正让企业在激烈的市场竞争中陷入被动。而 APS自动单软件 的出现,正以其卓越的智能化能力,成为推动金属加工企业迈向“智造”升级的核心驱动力。 一、金属加工行业的生产管
    的头像 发表于 11-25 14:17 724次阅读
    安达发|APS自动<b class='flag-5'>排</b>产<b class='flag-5'>排</b>程<b class='flag-5'>排</b>单软件:金属加工厂的“智慧大脑”

    航空的精准刻度:航空发动机全生命周期碳排放计量与路径探析

    国际民航组织(ICAO)联合193个成员国提出2050年净零放目标,这一承诺在2025年的ICAO第42届大会上得到重申,各成员国确认了对实现国际航空净零碳排放的坚定承诺。
    的头像 发表于 11-04 11:20 766次阅读
    航空<b class='flag-5'>减</b><b class='flag-5'>排</b>的精准刻度:航空发动机全生命周期碳排放计量与<b class='flag-5'>减</b><b class='flag-5'>排</b>路径探析

    源网荷储+碳管控!安科瑞助力乡村零碳发展

    的核心抓手。作为全国碳体系的重要组成部分,乡村承载着农业生产、生态涵养的双重使命,但其传统能源依赖、生产方式粗放、基础设施薄弱等问题,既制约着自身发展质量,也影响着国家“双碳”目标的整体推进。零碳乡村建设并非简单的“降碳
    的头像 发表于 11-04 09:45 357次阅读
    源网荷储+碳<b class='flag-5'>排</b>管控!安科瑞助力乡村零碳发展

    再落两子!晶映签约湖州、临沂代理商,节能版图加速扩张

    晶映节能签约湖州、临沂代理商,以 “节能 + 智能” 产品适配两地产业需求,加速布局长三角与鲁南,助力企业降本碳,共拓绿色市场。
    的头像 发表于 10-26 18:08 993次阅读
    再落两子!晶映签约湖州、临沂代理商,节能版图<b class='flag-5'>加速</b>扩张

    碳排放排量数据采集物联网解决方案

    CCER(核证自愿排量)指“对我国境内可再生能源、林业碳汇、甲烷利用等项目的温室气体效果进行量化核证,并在国家温室气体自愿交易注册
    的头像 发表于 09-26 17:28 1540次阅读
    碳排放<b class='flag-5'>减</b>排量数据采集物联网解决方案

    什么是零碳工厂?微电网能源管理平台助力工厂运营“净零放” !

    引言: 在全球“碳中和”浪潮与中国“双碳”目标的推动下,制造业正经历一场从高碳向低碳、零碳转型的深刻变革。零碳工厂作为工业脱碳的核心载体,不仅承载着环境责任,更成为企业提升竞争力、规避碳关税壁垒
    的头像 发表于 09-01 17:52 931次阅读
    什么是零碳工厂?微电网能源管理平台助力工厂运营“净零<b class='flag-5'>排</b>放” !

    MediaTek碳目标通过SBTi审核

    联合国全球契约组织(UNGC)共同发起的一项全球倡议,目标是确保企业的碳路径与《巴黎协定》保持一致,即将全球升温控制在 1.5°C 以内。
    的头像 发表于 08-18 14:36 1116次阅读

    安科瑞光储充一体化解决方案如何给企业降本

    电子发烧友网站提供《安科瑞光储充一体化解决方案如何给企业降本碳.docx》资料免费下载
    发表于 07-16 15:42 0次下载

    FORVIA佛瑞亚中国如何推进采购端的工作

    作为全球首个净零放目标获科学碳目标倡议组织(SBTi)批准的汽车科技企业,FORVIA佛瑞亚集团已在中国区取得亮眼成绩——提前实现“范围一”和“范围二”排放量降低80%(与2019年相比),并全力朝着于2045年实现净零放的承诺前进。
    的头像 发表于 06-19 13:40 1163次阅读

    CSD船用变压器岸电应用:为何成港口神器?

    “船舶靠港时冒黑烟,港口被罚环保税怎么办?”这是全球港口运营商的切肤之痛。随着IMO限硫令升级,岸电系统成为船舶的终极方案,而CSD船用隔离变压器正是这套系统的“心脏”。但问题来了:它如何在盐雾
    的头像 发表于 05-29 00:00 770次阅读
    CSD船用变压器岸电应用:为何成港口<b class='flag-5'>减</b><b class='flag-5'>排</b>神器?