0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

NVIDIA英伟达 来源:未知 2023-05-24 05:45 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

ChatGPT、Stable Diffusion、DALL-E 以及类似的应用程序让生成式 AI 震惊了世界。ChatGPT 是有史以来发展最快的应用程序。其易用性和令人印象深刻的功能在短短几个月内吸引了超过一亿用户。

生成式 AI 为企业重塑其产品和商业模式带来了紧迫感。正如 NVIDIA 创始人兼首席执行官黄仁勋在 GTC 2023 主题演讲中所说:“AI 的 iPhone 时刻已经到来。” NVIDIA 加速计算正在助力全球企业通过解决超出普通计算机能力的问题来利用人工智能

NVIDIA BlueField DPU 助力加速计算

NVIDIA 加速计算技术堆栈使每个行业都能利用人工智能的强大功能,提供运行下一波应用程序所需的性能、规模和能效水平。

加速计算主要运行在三个基本元素之上:

  • CPU:用于串行处理和运行超线程应用程序。

  • GPU:擅长并行处理,并针对加速现代工作负载进行了优化。

  • DPU:非常适合基础设施计算任务;用于卸载、加速和隔离数据中心网络、存储、安全和管理工作负载。

在现代软件定义数据中心中,执行虚拟化、网络、存储和安全的操作系统可能会消耗近一半的数据中心 CPU 核心和相关电力。数据中心必须加速每个工作负载以节省电力,并释放 CPU 来处理创收工作负载。

NVIDIA BlueField DPU(数据处理器)卸载并加速数据中心操作系统和基础设施软件。

NVIDIA 正在其数据中心计算系统中集成 BlueField-3 DPU,包括第三代 NVIDIA OVX 系统,以便在数据中心规模创建和操作 NVIDIA Omniverse 应用程序。想了解更多信息,请参阅 NVIDIA 发布用于驱动工业元宇宙应用的第三代 OVX 计算系统,推动 Omniverse 实现大规模部署。

使用 DPU 的领先企业

Oracle 云基础设施(OCI)继在 GTC 2023 发布之后,最近公布了将 NVIDIA BlueField-3 DPU 集成到其网络堆栈中的计划。该计划旨在通过将网络和安全任务从 CPU 卸载到 DPU 来优化数据中心性能,从而实现更快、更高效的处理。

通过利用 BlueField-3 DPU 的强大功能,OCI 随时可以增强其基础设施,为客户提供无缝的云体验。想了解更多详细信息,请参阅 Oracle 云基础设施(OCI)选择 NVIDIA BlueField 数据中心加速平台。

此外,包括 Check Point、Cisco 、DDN、Dell EMC、Juniper、Palo Alto Networks、Red Hat 和 VMWare 在内的二十多个生态系统合作伙伴使用 BlueField 数据中心加速技术来更高效地运行其软件平台。

NVIDIA BlueField -3 平台概述

NVIDIA BlueField-3 具有 220 亿个晶体管,是第三代 NVIDIA DPU。它是一款片上系统(SoC)设备,可提供高达 400Gbps 以太网和 InfiniBand 连接。BlueField -3 DPU 最多支持四个不同的 MAC 地址,可以提供各种端口配置,从单个 400Gbps 端口(四通道 PAM4 112)到四个 25、50 或 100 Gbps端口。

与上一代相比,BlueField-3 DPU 具有 2 倍的网络带宽、4 倍的计算能力和几乎 5 倍的内存带宽,同时通过 NVIDIA DOCA 软件框架提供完全的向后兼容性。

这些关键进步使 BlueField-3 DPU 能够以高达 8 倍的速度运行工作负载,同时降低 TCO 并提高数据中心能效。例如,BlueField -3 DPU 可从 CPU 卸载 HPC / AI MPI 集合通信,将速度提高近 20%,这相当于为大型超级计算机节省 1800 万美元的成本。想了解更多信息,请参阅节能环保:NVIDIA BlueField DPU 提升数据中心效率。

ded187d6-f9b2-11ed-90ce-dac502259ad0.png

图 1:与 NVIDIA BlueField -2 DPU 相比,

NVIDIA BlueField -3 DPU 的内存带宽和计算能力提高了四倍

BlueField-3 DPU 由三个主要模块组成:

  • 网络:集成网络和安全硬件加速器的最新一代 NVIDIA ConnectX-7 智能网卡。

  • 编程计算:具有 16 个 ARM A78 v8.2 核心组成的强大集群,专为控制平面应用程序提供优化的、完全一致的低延迟网络互连技术。数据平面可编程性通过加速管道线(pipeline)和新的可编程数据路径加速器(DPA)实现。数据路径加速器是一颗由 16 个超线程核心组成的 I/O 和数据包处理器,专为设备仿真、拥塞控制、自定义协议等 IO 密集型、低计算任务而构建。

  • 内存:双 64 位 DDR5-5600 内存接口(80GB 带宽)和集成的 32 通道第五代 PCIe 交换机。PCIe 接口可以分叉并用作服务器托管(端点)或自托管(根复合体),以管理 GPU 或直连 SSD 设备。

作为 “服务器前面的服务器”,BlueField-3 DPU 是唯一配备集成式 ASPEED AST2600 基板管理控制器(BMC)的 DPU 平台。BlueField BMC 是一个专用处理器,用于监控 DPU 板的物理状态,并使系统管理员能够通过独立连接来管理平台。这增强了系统的安全性、可靠性、可用性和可维护性。

DPU BMC 是一个受信任的实体,具有自己的外部信任根,以确保其固件的安全。它支持通过独立的带外管理网络调配和管理 BlueField DPU,并使用标准接口和 Redfish 协议管理 DPU 的整个生命周期。

BMC 的一些功能包括:

  • 控制台接口访问 BlueField DPU

  • 设置 BlueField UEFI 配置

  • 监测 BlueField DPU 及其资源

  • 更新和恢复 BlueField DPU 固件

  • 重置控制(即使在 BlueField 操作系统停止时)

BlueField-3 DPU 全面产品线

NVIDIA 提供了各种 BlueField-3 DPU 平台,旨在满足各行各业和用例的独特计算、内存和性能需求。这使客户能够选择符合其特定要求的 BlueField-3 DPU 产品,同时享受先进的功能和尖端的性能。

def9890c-f9b2-11ed-90ce-dac502259ad0.jpg

图 2:面向不同目标市场的

NVIDIA BlueField-3 DPU 旗舰平台

目标市场和旗舰平台

BlueField-3 DPU 用于几个关键旗舰平台和目标市场,具体如下:

超大规模高性能计算(HPC)/

人工智能(AI)

高性能计算和人工智能工作负载是率先采用 400Gbps(NDR InfiniBand 和 400 GbE)网络速度的工作负载,因为高性能计算就是为了实现最高性能和巨大规模的。BlueField DPU 利用其 ARM 核心从系统主机 CPU 卸载消息传递接口(MPI)的元素,并实现了无阻塞集合通信,从而扩展了 NVIDIA 网络计算能力。这使得系统主机 CPU 能够在峰值重叠时执行计算。

B3240:拥有满足极具挑战性的超大规模高性能计算/人工智能需求的强大性能和网络能力。此 BlueField-3 DPU 平台为 NVIDIA DGX H100 等系统提供动力,使其能够承担科学研究或生成人工智能的工作负载。它使用双 400Gbps NDR 连接、32GB DDR5 内存子系统和 2.3GHz 的 ARM 核心速度。

B3140H:具有半高半长(HHHL)外形规格,使其与大多数企业服务器兼容。该设备提供单个 400Gbps 端口和 16GB DDR5 内存,同时在低功耗范围内运行。这使其成为高性能计算/人工智能环境的理想选择,在空间或电源可用性受限的环境下实现所需的可扩展性能。

云计算

云行业正在经历的快速增长要求云提供商不断创新和定制其服务产品,以满足客户需求。现代云平台使用基于虚拟机监控程序(Hypervisor)的虚拟化,以最大限度地增加在计算和数据中心层面可分配给租户的虚拟实例数量。BlueField-3 DPU 支持多达 4096 个虚拟功能(VF),使云提供商能够在云计算平台上托管比上一代多 4-8 倍的虚拟实例。

B3220:提供双 200Gbps 端口、32GB DDR5 内存子系统和 2.3GHz 的 ARM 核心速度,具有满足最具挑战性的云所需的性能和网络功能。因此,超大规模 Oracle 云基础设施(OCI)已在其网络堆栈中添加了 BlueField-3 DPU,旨在提供最先进、可持续的云基础设施,并提供卓越的性能。B3220 平台还为 NVIDIA OVX 3.0 系统助力,实现更高的性能、零信任安全,并在云中无限扩展工业元宇宙应用程序。

B3210:100Gbps 速率的 B3210 非常适合满足领先企业数据中心的需求。B3210 是运行企业工作负载平台 VMware vSphere 的目标 DPU,为成千上万的公司提高性能、效率和安全性。

储存

B3220SH:B3220SH 自托管平台对集成 NVMe-oF、NVMe/TCP 或静态数据加速器的 NVMe 存储系统进行了优化。B3220SH 可通过 32 通道的第五代 PCIe 接口托管多达 16 个 SSD。

业界领先的网络性能

与上一代产品相比,BlueField-3 DPU 具有显著的性能提升,使其成为需要高性能网络的数据密集型人工智能工作负载的理想解决方案。图 3 显示了基准测试结果,证明了BlueField-3 DPU 领先的网络性能。

df164628-f9b2-11ed-90ce-dac502259ad0.jpg

图 3 :NVIDIA BlueField-3 DPU

和 BlueField-2 DPU 的测试结果比较

使用 NVIDIA BlueField-3 DPU

为您的应用程序助力

在云主导企业 IT 的时代,生成式 AI、数据科学和元宇宙应用程序等现代工作负载正在蓬勃发展。为了满足对人工智能飞速发展的需求,云构建商开始采用 NVIDIA 加速计算(主要是 GPU 和 DPU)。

NVIDIA BlueField-3 DPU 由 NVIDIA DOCA 软件提供助力,将传统的计算环境转变为高效、高性能、安全且可持续的数据中心,从而实现下一波应用程序的交付。

观看下方视频

了解更多关于 NVIDIA BlueField DPU 的信息!

扫描下方二维码,或点击“阅读原文” 查看更多有关 NVIDIA BlueField DPU 的信息。

df385ed4-f9b2-11ed-90ce-dac502259ad0.png


扫描下方二维码,即可查看 BlueField-3 DPU 产品手册和网络产品资源。

df4bc7a8-f9b2-11ed-90ce-dac502259ad0.png

df6a23e2-f9b2-11ed-90ce-dac502259ad0.gif  

NVIDIA BlueField DPU 往期内容 使用 VMware vSphere 8 和 NVIDIA BlueField DPU 加速 Redis 性能
借助 NVIDIA DPU 和 NVIDIA DOCA 为人工智能时代的数据中心带来变革
GTC23 | Oracle 云基础设施 (OCI) 选择 NVIDIA BlueField 数据中心加速平台
NVIDIA 人工智能开讲 | BlueField DPU 如何帮助企业提升数据中心能效
白皮书发布 | 看 NVIDIA BlueField DPU 如何让数据中心变得更加环保


原文标题:使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4040

    浏览量

    97680

原文标题:使用 NVIDIA BlueField-3 DPU 驱动下一波应用程序

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA在ISC 2025分享最新超级计算进展

    NVIDIA DGX Spark 到 NVIDIA BlueField-4 DPU,新代网络和量子技术实现了飞跃。在 SC25 上展示
    的头像 发表于 11-25 10:59 489次阅读
    <b class='flag-5'>NVIDIA</b>在ISC 2025分享最新超级计算进展

    NVIDIA推出全新BlueField-4 DPU

    全新 NVIDIA BlueField DPU 具有 800Gb/s 的吞吐量,其集成的 NVIDIA ConnectX-9 SuperNIC 和
    的头像 发表于 11-03 14:48 598次阅读

    MediaTek携手NVIDIA开启个人AI算力新纪元

    Spark 助力开发者能在本地端对大型 AI 模型进行原型设计(Prototype)、微调(Fine-tune)和推理(Inference)。NVIDIA DGX Spark 将于 10 月 15 日上市,将驱动各产业迎来新一波
    的头像 发表于 10-16 11:26 479次阅读

    基于NVIDIA BlueField DPU的5G UPF数据面加速方案

    在第三届 NVIDIA DPU 黑客松竞赛中,我们见证了开发者与 NVIDIA 网络技术的深度碰撞。在 23 支参赛队伍中,有 5 支队伍脱颖而出,展现了在 AI 网络、存储和安全等领域的创新突破。
    的头像 发表于 09-04 11:26 885次阅读

    NVIDIA助力Axio团队打造全新DPU数据面开发框架

    在第三届 NVIDIA DPU 黑客松竞赛中,我们见证了开发者与 NVIDIA 网络技术的深度碰撞。在 23 支参赛队伍中,有 5 支队伍脱颖而出,展现了在 AI 网络、存储和安全等领域的创新突破。
    的头像 发表于 08-30 15:58 1152次阅读

    利用NVIDIA DPU重塑网络安全格局

    在第三届 NVIDIA DPU 黑客松竞赛中,我们见证了开发者与 NVIDIA 网络技术的深度碰撞。在 23 支参赛队伍中,有 5 支队伍脱颖而出,展现了在 AI 网络、存储和安全等领域的创新突破。
    的头像 发表于 08-20 14:31 1026次阅读

    FX3 UVC 无法与 Ubuntu 24.04 Cheese 或 Snapshot 相机应用程序配合使用,怎么处理?

    添加了来自 VLC 的日志以供比较。根据日志,似乎 PipeWire 或 UVC 驱动程序存在些问题。 我直在做些调试,发现对于 Ubuntu 视频有
    发表于 07-16 06:37

    NVIDIA DOCA 3.0版本的亮点解析

    NVIDIA DOCA 框架已发展成为新代 AI 基础设施的重要组成部分。从初始版本到备受期待的 NVIDIA DOCA 3.0 发布,每个版本都扩展了 NVIDIA
    的头像 发表于 07-04 14:27 962次阅读
    <b class='flag-5'>NVIDIA</b> DOCA 3.0版本的亮点解析

    第三届NVIDIA DPU黑客松开启报名

    碰撞的绝佳机会。本次竞赛采用开放式主题,参与者将通过 NVIDIA DOCA 软件框架构建创新的加速应用程序,充分挖掘 NVIDIA BlueField
    的头像 发表于 05-27 10:16 744次阅读

    如何在Ubuntu上安装NVIDIA显卡驱动?

    作者:算力魔方创始人/英特尔创新大使刘力 ,前言 对于使用NVIDIA显卡的Ubuntu用户来说,正确安装显卡驱动是获得最佳图形性能的关键。与Windows系统不同,Linux系统通常不会自动安装
    的头像 发表于 05-07 16:05 2072次阅读
    如何在Ubuntu上安装<b class='flag-5'>NVIDIA</b>显卡<b class='flag-5'>驱动</b>?

    JCMsuite应用:四分之一波

    是光手性的本征态。因此,近场光手性密度与圆偏振密切相关。在几何光学中,四分之一波板将线偏振转换为圆偏振是众所周知的。它们是由双折射材料制成的,例如各向异性材料。片的厚度是寻常(x-)偏振和非寻常(z-
    发表于 02-21 08:49

    NVIDIA网络安全AI平台助力保护关键基础设施

    此平台集成了 NVIDIA BlueField 和 Morpheus,并为 Armis、Check Point Software Technologies、CrowdStrike、Deloitte 和 WWT 的下一代网络防御提
    的头像 发表于 02-19 10:22 928次阅读

    利用NVIDIA DPF引领DPU加速云计算的未来

    DPU 的强大功能,并优化 GPU 加速计算平台。作为种编排框架和实施蓝图,DPF 使开发者、服务提供商和企业能够无缝构建 BlueField 加速的云原生软件平台。
    的头像 发表于 01-24 09:29 1279次阅读
    利用<b class='flag-5'>NVIDIA</b> DPF引领<b class='flag-5'>DPU</b>加速云计算的未来

    ANACONDA——关于发布数据应用程序的新简单方法

    与 Anaconda 的云笔记本服务无缝集成,为用户提供了种轻松共享笔记本结果的方式,并让其他人也可以随意的访问它们。 下面我们来了解关于这项新功能的实际应用: 这项功能与 Panel 的多功能性相结合,将彻底改变您发布数据应用程序的方式。使用这个强大的工具,为共享和协
    的头像 发表于 01-17 11:39 644次阅读
    ANACONDA——关于发布数据<b class='flag-5'>应用程序</b>的新简单方法

    NVIDIA BlueField-3 DPU上运行WEKA客户端的实际优势

    WEKA是可扩展软件定义数据平台的先驱,NVIDIA 正在与其合作,将 WEKA 先进的数据平台解决方案与功能强大的NVIDIA BlueField DPU相结合。
    的头像 发表于 01-07 09:43 1050次阅读
    在<b class='flag-5'>NVIDIA</b> <b class='flag-5'>BlueField-3</b> <b class='flag-5'>DPU</b>上运行WEKA客户端的实际优势