0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA RDMA 网络方案赋能数据库业务持续发展

NVIDIA英伟达 来源:NVIDIA英伟达 作者:NVIDIA英伟达 2022-01-04 17:31 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

云原生数据库 TDSQL-C (原 CynosDB,TDSQL for Cloud Native Database) 是腾讯云自研的新一代高性能高可用的企业级分布式云数据库, TDSQL-C 使用 NVIDIA UCX RDMA 优化了关键路径系统性能,实现了超百万级 QPS 的高吞吐,128TB 海量分布式智能存储,保障了数据安全可靠。

云原生数据库 TDSQL-C 实现高性能面临挑战

TDSQL-C 采用计算存储分离的架构,可以快速进行节点的扩容,节点的迁移,但其引入的网络开销对实现高性能提出了更高的挑战。因此需要采用软件优化与新硬件相结合,通过基于 SPDK 和 UCX RDMA 的零拷贝技术,减少了操作系统上下文切换以及数据在用户态和内核态之间拷贝引起的性能损耗,进一步优化关键路径的系统性能,降低请求延迟。

传统的 TCP/IP 网络,存在以下几个缺点:应用的 buffer 发送到对端,需要经过多次拷贝,对端收到数据到接收到应用的接收 buffer,也需要多次拷贝;应用的 buffer 拷贝到 TCP/IP 的 buffer,需要从用户态进入到内核态,会有上下文切换;网络协议栈完全由 CPU 执行,耗费 CPU。

NVIDIA RDMA 网络方案+ConnectX 系列网卡

“软硬” 兼施,赋能数据库业务持续发展

充分利用软硬件资源做系统级别 Scale Out、Scale Up、 RDMA 等 Kernel ByPass 的低延时网络基础。以底层高性能硬件能力作为支柱,给腾讯云数据库业务发展提供持续不断的系统源动力。

根据业务部门需求和服务器新产品导入团队多年来在 RDMA 技术上的沉淀, 推荐使用搭载 NVIDIA ConnectX 系列网卡的服务器,使用 NVIDIA RDMA 网络方案来对数据库场景进行专项优化,充分利用 RDMA 天然的性能优势:

RDMA 技术是用户空间进程绕过内核直接调用 RDMA 网卡,实现和远端进程的高效快速通讯。RDMA 伴生于 InfiniBand 网络技术,由 IBTA 组织对其进行标准化定义和维护。RDMA 技术优势可以解决 TCP 传输方式中的各种缺点:

整个数据传输过程内存零拷贝。

网络传输完全卸载到网卡硬件,不占用 CPU 资源。

使用 RDMA 技术可以 100% 利用网络带宽。

整个数据传输过程由硬件完成,降低了系统延时。

NVIDIA RDMA 网络方案

助力远端计算和存储网络优化

NVIDIA RDMA 网络方案搭在硬件上使远端计算和存储网络的优化效果达到最优。

在 RDMA 与 TCP 性能的关键指标的对比测试中,RDMA 体现了其优势。例如从oplog msg 性能数据上看,RDMA 测延迟比 TCP 降低 71.7%,吞吐提高 43.2%;在 page 性能数据方面(page 大小为16KB),RDMA 测延迟比 TCP 降低 70.3%,吞吐提高 52.3%。

腾讯云数据库是腾讯服务的基础架构,网络的延迟和带宽对于性能至关重要, RDMA 技术的 Kernel Bypass 和 CPU Offload 可以带来极低的延迟和极高的带宽。在 NVIDIA 网络产品上部署的推荐系统将为腾讯用户提供业界一流的性能,使用户充分享受 RDMA 带来的技术红利。

—— 腾讯云数据库TDSQL-C负责人

李志阳

NVIDIA 作为 RDMA 技术的推动者和领跑者,很高兴看到这项技术在腾讯得到越来越广泛的应用,并正在从传统的 HPC/AI 业务拓展到高性能存储和数据库领域。UCX 的使用大幅度提高了 RDMA 应用的开发效率和吞吐率,并且使得 RoCE 跟客户应用能迅速整合,从而帮助客户更快走向市场,并提供差异化的云产品和服务。

—— NVIDIA 副总裁

Vadim Balahovski

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

审核编辑:彭菁
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5685

    浏览量

    110111
  • 服务器
    +关注

    关注

    14

    文章

    10353

    浏览量

    91742
  • 数据库
    +关注

    关注

    7

    文章

    4082

    浏览量

    68535

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    国内首个地质储专业数据库投用 筑牢新能源发展数据根基

    新能源产业高质量发展与地下空间资源高效利用筑牢了数据根基。   在“双碳”目标引领下,新能源产业与储技术融合发展提速,地质储作为重要的长
    的头像 发表于 02-09 09:11 2346次阅读

    半导体首获EcoVadis可持续发展铜牌认证

    近日,晶光电子公司——晶半导体在全球权威企业可持续发展评级机构EcoVadis的评估中,首次参评即荣获铜牌认证,在过去12个月参与过 EcoVadis 评估的公司中,晶半导体跻身
    的头像 发表于 02-02 17:31 1963次阅读

    成都华微荣获2025年上市公司可持续发展优秀实践案例

    近日,中国上市公司协会发布2025年上市公司可持续发展最佳及优秀实践案例,成都华微凭借在技术创新、产业担当与低碳等领域的卓越表现成功入选可持续发展优秀实践案例,这是行业对公司可
    的头像 发表于 11-25 11:32 926次阅读

    海辰储荣获EcoVadis可持续发展金牌评级

    近日,全球权威可持续发展评级机构 EcoVadis 披露最新企业社会责任评级结果,海辰储首次参评即斩获 80 分高分,荣获 EcoVadis“金牌”评级。这一成绩使海辰储跻身全行业参评企业前5%的领先行列,更创下国内储
    的头像 发表于 10-28 09:44 1018次阅读

    AI与数据库双向,达梦靠自主创新把握弯道超车机遇

    在AI技术迅猛发展的今天,作为数据存储与处理核心载体的数据库,正经历一场深刻的变革,传统数据库与AI技术的碰撞融合,带来了新的发展机遇,也在
    的头像 发表于 08-29 10:57 962次阅读

    爱立信荣获FutureNet World 2025网络持续发展

    爱立信近日凭借其5G Advanced自动化节能解决方案荣获 FutureNet World"网络持续发展奖"
    的头像 发表于 07-30 10:47 1.6w次阅读

    数据库数据恢复—服务器异常断电导致Oracle数据库故障的数据恢复案例

    Oracle数据库故障: 某公司一台服务器上部署Oracle数据库。服务器意外断电导致数据库报错,报错内容为“system01.dbf需要更多的恢复来保持一致性”。该Oracle数据库
    的头像 发表于 07-24 11:12 837次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—服务器异常断电导致Oracle<b class='flag-5'>数据库</b>故障的<b class='flag-5'>数据</b>恢复案例

    三款主流国产数据库的技术特点

    随着数字经济的快速发展数据安全要求的提升,国产数据库正迎来前所未有的发展机遇。在信创浪潮推动下,达梦数据库、TiDB、华为高斯
    的头像 发表于 07-14 11:08 1334次阅读

    NVIDIA在可持续发展领域的实践

    在最新发布的 NVIDIA 2025 财年可持续发展报告开篇的一封信中,NVIDIA 创始人兼首席执行官黄仁勋以深远的视野勾勒出 AI 时代的新工业革命图景。他指出,AI 不仅正在重塑每一个行业
    的头像 发表于 07-09 16:44 1376次阅读

    数据库数据恢复—MongoDB数据库文件丢失的数据恢复案例

    MongoDB数据库数据恢复环境: 一台操作系统为Windows Server的虚拟机上部署MongoDB数据库。 MongoDB数据库故障: 工作人员在MongoDB服务仍
    的头像 发表于 07-01 11:13 777次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—MongoDB<b class='flag-5'>数据库</b>文件丢失的<b class='flag-5'>数据</b>恢复案例

    数据库数据恢复—SQL Server数据库被加密如何恢复数据

    SQL Server数据库故障: SQL Server数据库被加密,无法使用。 数据库MDF、LDF、log日志文件名字被篡改。
    的头像 发表于 06-25 13:54 834次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—SQL Server<b class='flag-5'>数据库</b>被加密如何恢复<b class='flag-5'>数据</b>?

    NVIDIA AI技术助力欧洲医疗健康行业发展

    从构建全球规模最大的生物多样性数据库,到打造罕见病研究的 AI 工厂,NVIDIA 的 AI 初创企业生态系统正持续为欧洲医疗健康领域注
    的头像 发表于 06-19 14:40 3523次阅读

    2025中兴通讯“创兴日”ESG可持续发展论坛圆满落幕

    近日,2025中兴通讯“创兴日”ESG可持续发展论坛在深圳举办。本次论坛以“数智ESG 共筑绿色新未来”为主题,邀请政府专家、顶尖学者、知名企业、咨询机构等齐聚一堂,围绕 ESG可持续发展
    的头像 发表于 06-04 16:42 1371次阅读

    MySQL数据库是什么

    MySQL数据库是一种 开源的关系型数据库管理系统(RDBMS) ,由瑞典MySQL AB公司开发,后被Oracle公司收购。它通过结构化查询语言(SQL)进行数据存储、管理和操作,广泛应用于Web
    的头像 发表于 05-23 09:18 1433次阅读

    智能通信网络设计引擎:VDE Cloud未来汽车网络研发

    VDE Cloud 作为一款基于B/S架构的车载总线通信数据库设计和管理系统,为汽车智能通信网络设计深度
    的头像 发表于 05-13 13:44 645次阅读
    智能通信<b class='flag-5'>网络</b>设计引擎:VDE Cloud<b class='flag-5'>赋</b><b class='flag-5'>能</b>未来汽车<b class='flag-5'>网络</b>研发