创作

完善资料让更多小伙伴认识你,还能领取20积分哦, 立即完善>

3天内不再提示

NVIDIA RDMA 网络方案赋能数据库业务持续发展

NVIDIA_China 来源:NVIDIA英伟达 作者:NVIDIA英伟达 2022-01-04 17:31 次阅读

云原生数据库 TDSQL-C (原 CynosDB,TDSQL for Cloud Native Database) 是腾讯云自研的新一代高性能高可用的企业级分布式云数据库, TDSQL-C 使用 NVIDIA UCX RDMA 优化了关键路径系统性能,实现了超百万级 QPS 的高吞吐,128TB 海量分布式智能存储,保障了数据安全可靠。

云原生数据库 TDSQL-C 实现高性能面临挑战

TDSQL-C 采用计算存储分离的架构,可以快速进行节点的扩容,节点的迁移,但其引入的网络开销对实现高性能提出了更高的挑战。因此需要采用软件优化与新硬件相结合,通过基于 SPDK 和 UCX RDMA 的零拷贝技术,减少了操作系统上下文切换以及数据在用户态和内核态之间拷贝引起的性能损耗,进一步优化关键路径的系统性能,降低请求延迟。

传统的 TCP/IP 网络,存在以下几个缺点:应用的 buffer 发送到对端,需要经过多次拷贝,对端收到数据到接收到应用的接收 buffer,也需要多次拷贝;应用的 buffer 拷贝到 TCP/IP 的 buffer,需要从用户态进入到内核态,会有上下文切换;网络协议栈完全由 CPU 执行,耗费 CPU。

NVIDIA RDMA 网络方案+ConnectX 系列网卡

“软硬” 兼施,赋能数据库业务持续发展

充分利用软硬件资源做系统级别 Scale Out、Scale Up、 RDMA 等 Kernel ByPass 的低延时网络基础。以底层高性能硬件能力作为支柱,给腾讯云数据库业务发展提供持续不断的系统源动力。

根据业务部门需求和服务器新产品导入团队多年来在 RDMA 技术上的沉淀, 推荐使用搭载 NVIDIA ConnectX 系列网卡的服务器,使用 NVIDIA RDMA 网络方案来对数据库场景进行专项优化,充分利用 RDMA 天然的性能优势:

RDMA 技术是用户空间进程绕过内核直接调用 RDMA 网卡,实现和远端进程的高效快速通讯。RDMA 伴生于 InfiniBand 网络技术,由 IBTA 组织对其进行标准化定义和维护。RDMA 技术优势可以解决 TCP 传输方式中的各种缺点:

整个数据传输过程内存零拷贝。

网络传输完全卸载到网卡硬件,不占用 CPU 资源。

使用 RDMA 技术可以 100% 利用网络带宽。

整个数据传输过程由硬件完成,降低了系统延时。

NVIDIA RDMA 网络方案

助力远端计算和存储网络优化

NVIDIA RDMA 网络方案搭在硬件上使远端计算和存储网络的优化效果达到最优。

在 RDMA 与 TCP 性能的关键指标的对比测试中,RDMA 体现了其优势。例如从oplog msg 性能数据上看,RDMA 测延迟比 TCP 降低 71.7%,吞吐提高 43.2%;在 page 性能数据方面(page 大小为16KB),RDMA 测延迟比 TCP 降低 70.3%,吞吐提高 52.3%。

腾讯云数据库是腾讯服务的基础架构,网络的延迟和带宽对于性能至关重要, RDMA 技术的 Kernel Bypass 和 CPU Offload 可以带来极低的延迟和极高的带宽。在 NVIDIA 网络产品上部署的推荐系统将为腾讯用户提供业界一流的性能,使用户充分享受 RDMA 带来的技术红利。

—— 腾讯云数据库TDSQL-C负责人

李志阳

NVIDIA 作为 RDMA 技术的推动者和领跑者,很高兴看到这项技术在腾讯得到越来越广泛的应用,并正在从传统的 HPC/AI 业务拓展到高性能存储和数据库领域。UCX 的使用大幅度提高了 RDMA 应用的开发效率和吞吐率,并且使得 RoCE 跟客户应用能迅速整合,从而帮助客户更快走向市场,并提供差异化的云产品和服务。

—— NVIDIA 副总裁

Vadim Balahovski

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

审核编辑:彭菁

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    通过Grafana实现OVL数据可视化的两种方法

    本文以MySQL数据库为例介绍如何通过Grafana来实现OVL数据的可视化,其中有两种方法,一种是....
    的头像 广州虹科电子科技有限公司 发表于 05-27 17:52 367次 阅读

    Supermicro:洞察七大创新技术,以模块化系统为基石,创造绿色高效的IT解决方案

    电子发烧友网报道(文/黄晶晶)近日,Supermicro公司在2022 COMPUTEX在线展出先进....
    的头像 21克888 发表于 05-27 11:37 131次 阅读
    Supermicro:洞察七大创新技术,以模块化系统为基石,创造绿色高效的IT解决方案

    FishChat分布式可伸缩IM服务器

    ./oschina_soft/FishChatServer.zip
    发表于 05-27 10:40 3次 阅读
    FishChat分布式可伸缩IM服务器

    视频直播行业对服务器配置的要求有哪些

    如今视频直播是越来越火,做视频和直播的平台也越来越多,而不管是直播平台还是视频网站都需要一个配置较好....
    发表于 05-27 10:36 6次 阅读

    Bitpost Bitmessage客户端

    ./oschina_soft/Bitpost.zip
    发表于 05-27 10:32 3次 阅读
    Bitpost Bitmessage客户端

    Skyperious Skype数据库查看和合并工具

    ./oschina_soft/Skyperious.zip
    发表于 05-27 10:01 1次 阅读
    Skyperious Skype数据库查看和合并工具

    选择服务器时单独配件高是不可取的

    CPU是服务器运行的条件之一,并且CPU的稳定性越好,服务器处理数据越快。大家可想而知,CPU对服务....
    发表于 05-27 09:55 16次 阅读

    如何将高性能计算和科学计算应用软件更好的部署到GPU计算平台

    NVIDIA 与智东西公开课共同策划推出「GPU 加速高性能计算(HPC)经典应用在线研讨会」。研讨....
    的头像 NVIDIA英伟达 发表于 05-27 09:53 195次 阅读

    图形分析的概念/作用/工作原理/应用案例

    图形分析(或图形算法)是用于确定图形中对象之间的关系强度和方向的分析工具。图形分析的重点在于每次两个....
    的头像 NVIDIA英伟达 发表于 05-27 09:49 166次 阅读

    NVIDIA第一季度数据中心和游戏季度收入均创下纪录

    NVIDIA 宣布,截至 2022 年 5 月 1 日的第一季度收入创下 82.9 亿美元的纪录,较....
    的头像 NVIDIA英伟达 发表于 05-27 09:45 167次 阅读

    NVIDIA携手百度飞桨 共创多元AI开发生态

    由百度所举办的 Wave Summit 2022 深度学习开发者峰会圆满落幕, NVIDIA 作为百....
    的头像 NVIDIA英伟达企业解决方案 发表于 05-27 09:41 300次 阅读

    了解多相降压稳压器的优势

      降压稳压​​器是低压 DC-DC 转换的主力,为从服务器到智能手机的应用提供核心电源。它已经从非....
    的头像 星星科技指导员 发表于 05-27 09:39 112次 阅读
    了解多相降压稳压器的优势

    Verdaccio轻量级私有npm包代理注册表

    ./oschina_soft/verdaccio.zip
    发表于 05-27 09:20 3次 阅读
    Verdaccio轻量级私有npm包代理注册表

    TeleportTool访问Linux服务器集群工具

    ./oschina_soft/teleport.zip
    发表于 05-26 16:30 7次 阅读
    TeleportTool访问Linux服务器集群工具

    vnc2rdp RDP/VNC协议转换代理

    ./oschina_soft/vnc2rdp.zip
    发表于 05-26 16:19 9次 阅读
    vnc2rdp RDP/VNC协议转换代理

    MySQL关系数据库管理系统的使用技巧

    MySQL可能是最著名的关系数据库管理系统。作为 LAMP Web 开发平台的“M”,这个开源解决方....
    的头像 深圳市恒讯科技有限公司 发表于 05-26 16:02 57次 阅读

    litecli SQLite数据库命令行工具

    ./oschina_soft/litecli.zip
    发表于 05-26 15:49 1次 阅读
    litecli SQLite数据库命令行工具

    osnssh在Linux/mac终端简易使用ssh工具自动远程登录

    ./oschina_soft/osnssh.zip
    发表于 05-26 15:18 6次 阅读
    osnssh在Linux/mac终端简易使用ssh工具自动远程登录

    工业富联采用基于英伟达的超级芯片NVIDIA Grace CPU

    5月24日,工业富联宣布采用基于英伟达NVIDIA HGX、OVX和CGX系统设计的超级芯片NVID....
    的头像 科技绿洲 发表于 05-26 15:17 660次 阅读

    使用身份验证器的智能锁的使用和性能

      这个设置有一个弱点。您的控制器最终负责打开和关闭锁的操作。如果它不安全,它很容易受到入侵者的攻击....
    的头像 星星科技指导员 发表于 05-26 14:28 145次 阅读
    使用身份验证器的智能锁的使用和性能

    WIFI智能配网简介及操作流程说明

    Wi-Fi 配网,指由外部向 Wi-Fi 设备提供 SSID 和密码(PSW),让 Wi-Fi 设备....
    的头像 嵌入式技术 发表于 05-26 14:09 2479次 阅读
    WIFI智能配网简介及操作流程说明

    Tool-Chicken-Chat工具鸡聊天室

    ./oschina_soft/gitee-Tool-Chicken-Chat.zip
    发表于 05-26 11:20 6次 阅读
    Tool-Chicken-Chat工具鸡聊天室

    starRTC即时通讯工具

    ./oschina_soft/gitee-starrtc-android.zip
    发表于 05-26 11:15 4次 阅读
    starRTC即时通讯工具

    Supermicro为业界领先的高性能计算、数据分析和云游戏应用组合添加搭载NVIDIA Grace CPU超级芯片的服务器

    【2022 年 5 月 23 日美国加州圣何塞2022 年台北国际电脑展线上展讯】Super Mic....
    的头像 21克888 发表于 05-25 18:26 1800次 阅读
    Supermicro为业界领先的高性能计算、数据分析和云游戏应用组合添加搭载NVIDIA Grace CPU超级芯片的服务器

    工业物联网架构将如何演变

    随着边缘处理在不同的 IIoT 应用中变得更加不可或缺,底层技术具有满足小尺寸和低功耗要求的共同需求....
    的头像 星星科技指导员 发表于 05-25 17:22 254次 阅读
    工业物联网架构将如何演变

    工业富联推出下一代机房产品“模块化服务器”

    近日,工业富联全资子公司鸿佰科技(Ingrasys Technology Inc.)线上参与COMP....
    的头像 科技绿洲 发表于 05-25 14:17 224次 阅读

    OLAP与OLTP数据库的区别是什么

    OLAP与OLTP数据库由于关注的业务不同,所以软件在工作方式和优化方法会有一些不同。 OLTP业务....
    发表于 05-25 11:29 54次 阅读

    深度学习模型转成TensorRT引擎的流程

    前面我们花了很多力气在 TAO 上面训练模型,其最终目的就是要部署到推理设备上发挥功能。除了将模型训....
    的头像 NVIDIA英伟达企业解决方案 发表于 05-25 11:24 186次 阅读

    数字网络广播系统概述、组成及功能

    数字网络广播系统采用当今世界最广泛使用的以太网络技术,将音频信号以TCP/IP协议形式在校园网上进行....
    发表于 05-25 11:23 31次 阅读

    NVIDIA发布采用直接芯片冷却技术的数据中心PCIe GPU

    为了遏制气候变化,全球企业正在加快构建高性能、高能效的数据中心,Equinix 边缘基础设施主管 Z....
    的头像 NVIDIA英伟达企业解决方案 发表于 05-25 11:20 364次 阅读

    NVIDIA助力阿里云构建视觉计算解决方案

    随着线上协作、“虚拟经济”等领域的潜力日渐被发掘,扩展现实(XR)、数字孪生、虚拟现实(VR)等技术....
    的头像 NVIDIA英伟达企业解决方案 发表于 05-25 11:13 238次 阅读

    芯片和软件将数据中心转变为AI工厂

    数字孪生彻底改变了最复杂产品的生产方式。芯片和软件将数据中心转变为AI工厂。游戏业的发展将世界上最流....
    的头像 NVIDIA英伟达 发表于 05-25 11:10 252次 阅读

    基于Jetson AGX Orin的边缘AI和嵌入式计算系统

    硬件设计师在这场技术盛会上展示基于 Jetson AGX Orin 的边缘 AI 和嵌入式计算系统。
    的头像 NVIDIA英伟达 发表于 05-25 11:05 220次 阅读

    NVIDIA Grace CPU超级芯片大幅加速现代化工作负载

    华硕、富士康工业互联网、技嘉科技、云达科技、超微、纬颖等公司将提供用于数字孪生、 AI、高性能计算、....
    的头像 NVIDIA英伟达 发表于 05-25 11:02 167次 阅读

    DNS基本概述

    与 HTTP、FTP 和 SMTP 一样,DNS 协议也是一种应用层的协议,DNS 使用客户-服务器....
    的头像 程序员cxuan 发表于 05-25 10:49 157次 阅读

    如何才能保证服务器稳定正常的运行

    服务器运行时,如果出现故障服务器是否还能正常运转,且业务不会中断运行,这时候就会确认服务器容错如何?....
    的头像 QYT_ak 发表于 05-25 10:43 59次 阅读

    数据中心如何转型成为AI工厂

    数字孪生彻底改变了最复杂产品的生产方式。芯片和软件将数据中心转变为AI工厂。游戏业的发展将世界上最流....
    的头像 科技绿洲 发表于 05-25 10:39 553次 阅读

    新华三实现对NVIDIA液冷GPU及安培系列GPU全系适配

    5月24日,在全球科技盛会“Computex 2022”期间,NVIDIA正式推出A100 80GB....
    的头像 科技绿洲 发表于 05-25 10:34 251次 阅读

    webapp-vim网站服务器

    ./oschina_soft/webapp-vim.zip
    发表于 05-25 10:17 8次 阅读
    webapp-vim网站服务器

    不同接头can总线光纤转换器有啥不一样

    CAN转光纤转换器是能够将CAN总线数据与光信号相互转换的设备,能够实现超远距离的CAN中继目的。由....
    的头像 科技绿洲 发表于 05-25 10:07 503次 阅读

    vimdb模拟单个数据库

    ./oschina_soft/vimdb.zip
    发表于 05-25 09:39 8次 阅读
    vimdb模拟单个数据库

    使用配套安全IC保护连接设备中的TLS

      Maxim 的 DeepCover® 嵌入式安全产品组合包括 MAXQ1061,可用作具有成本效....
    的头像 星星科技指导员 发表于 05-25 09:04 226次 阅读

    KAIROS即将正式发布全新1.2版本紧凑型面板

     KAIROS将于5月25日正式发布全新1.2版本,今天先带大家提前看看本次升级主要提升了哪些方面。
    的头像 科技绿洲 发表于 05-24 17:42 953次 阅读

    使用安全身份验证器保护您的医疗设备端点

      安全认证器通过提供基于硬件的加密、固定功能操作来应对威胁;安全存储;和攻击对策。借助这些 IC ....
    的头像 星星科技指导员 发表于 05-24 16:41 337次 阅读
    使用安全身份验证器保护您的医疗设备端点

    安全IC如何保护物联网设备中的传输数据

     为了拥有真正安全的 TLS 方案并避免我们讨论过的陷阱,需要遵循一组最低限度的规则。在使用时保护会....
    的头像 星星科技指导员 发表于 05-24 16:19 389次 阅读

    Kepware助力无人化控制系统高效稳定的运行

    1 背景 某公司的堆取料机无人化控制系统,凭借数十年企业信息化实践经验,以机器人视觉控制技术为基础,....
    发表于 05-24 15:43 7次 阅读
    Kepware助力无人化控制系统高效稳定的运行

    安谋科技与鸿钧微电子合作助力国家数字经济发展建设

    近日,安谋科技(中国)有限公司(以下简称“安谋科技”)与本土服务器处理器提供商杭州鸿钧微电子科技有限....
    的头像 科技绿洲 发表于 05-24 15:40 249次 阅读

    NVIDIA Grace CPU迎来首批玩家,多家厂商将推出基于它的全新数据中心系统

    NVIDIA在Computex前夕宣布,多家计算机制造厂商将发布首批基于NVIDIA Grace C....
    的头像 荷叶塘 发表于 05-24 11:54 998次 阅读
    NVIDIA Grace CPU迎来首批玩家,多家厂商将推出基于它的全新数据中心系统

    为什么要在OpenHarmony设备上安装Dropbear呢

    ssh是一个常见的、可靠的远程终端/文件传输的协议,OpenHarmony本身并没有ssh服务器的功能。 为了启用ssh功能,我们需要引入一...
    发表于 05-23 17:45 1659次 阅读

    HTTP OTA webclient获取不到服务器如何处理?

    尝试用HTTP_OTA的方式来升级程序,按照网上的资料搭建程序,在http_ota.c中现在遇到Webclient获取不到服务器的情况: ...
    发表于 05-19 10:43 1105次 阅读

    自己上传的工程无法在线查看

    是服务器问题吗 一直提示无法下载
    发表于 05-17 14:25 1595次 阅读
    自己上传的工程无法在线查看

    影响服务器访问速度的因素

    我们在租用服务器的过程中,可能在访问速度方面,会受到某些因素影响,如果您要进行此项业务,进行一些简单的了解是非常的有必要...
    发表于 05-17 09:50 1575次 阅读

    如何调用CH579里面的Touch-Key库?

    第一次调CH579里面的Touch-Key,用的TKY_CH579库,有没有哪位大神用过,教教我调试的时候从哪一步开始调起?为啥我算的充...
    发表于 05-17 06:50 137次 阅读

    flashDB TSDB数据库插入数据时报错是为什么?

    flashDB TSDB的get_time函数时返回的系统时间戳,在使用中出现我偶然错误的将RTC时间设置得比现在的时间要大很多,后面...
    发表于 05-12 16:14 2268次 阅读

    kawayi mqtt连接mosquitto始终连接不上怎么解决?

    各位大咖好,遇到难点了,求助! 之前用lwip+phy调试和pc互ping没问题,现在在此基础上增加了kawayi mqtt软件包,尝试连接创建的...
    发表于 05-06 09:50 1528次 阅读

    Harmonyos应用程序开发如何连接到本地sqlserver数据库?

    开发文档里面是在运行代码时建立数据库,如何可以使应用程序连接到电脑内存的本地sqlserver数据库。 ...
    发表于 04-26 10:49 1022次 阅读

    RDS for PostgreSQL的插件的创建/删除和使用方法

    本文介绍 RDS for PostgreSQL 的插件及不同插件的创建、删除或使用方法。 PostgreSQL插件简介是开源数据库中的关系型...
    发表于 04-25 10:30 383次 阅读

    为什么ARMv8的通用服务器是ACPI呢

    overview ACPI可以用于ARMv8通用服务器,设计遵循ARM的SBSA (Server Base System Architecture) 和SBBR ...
    发表于 04-21 09:48 2322次 阅读