0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA RDMA 网络方案赋能数据库业务持续发展

NVIDIA英伟达 来源:NVIDIA英伟达 作者:NVIDIA英伟达 2022-01-04 17:31 次阅读

云原生数据库 TDSQL-C (原 CynosDB,TDSQL for Cloud Native Database) 是腾讯云自研的新一代高性能高可用的企业级分布式云数据库, TDSQL-C 使用 NVIDIA UCX RDMA 优化了关键路径系统性能,实现了超百万级 QPS 的高吞吐,128TB 海量分布式智能存储,保障了数据安全可靠。

云原生数据库 TDSQL-C 实现高性能面临挑战

TDSQL-C 采用计算存储分离的架构,可以快速进行节点的扩容,节点的迁移,但其引入的网络开销对实现高性能提出了更高的挑战。因此需要采用软件优化与新硬件相结合,通过基于 SPDK 和 UCX RDMA 的零拷贝技术,减少了操作系统上下文切换以及数据在用户态和内核态之间拷贝引起的性能损耗,进一步优化关键路径的系统性能,降低请求延迟。

传统的 TCP/IP 网络,存在以下几个缺点:应用的 buffer 发送到对端,需要经过多次拷贝,对端收到数据到接收到应用的接收 buffer,也需要多次拷贝;应用的 buffer 拷贝到 TCP/IP 的 buffer,需要从用户态进入到内核态,会有上下文切换;网络协议栈完全由 CPU 执行,耗费 CPU。

NVIDIA RDMA 网络方案+ConnectX 系列网卡

“软硬” 兼施,赋能数据库业务持续发展

充分利用软硬件资源做系统级别 Scale Out、Scale Up、 RDMA 等 Kernel ByPass 的低延时网络基础。以底层高性能硬件能力作为支柱,给腾讯云数据库业务发展提供持续不断的系统源动力。

根据业务部门需求和服务器新产品导入团队多年来在 RDMA 技术上的沉淀, 推荐使用搭载 NVIDIA ConnectX 系列网卡的服务器,使用 NVIDIA RDMA 网络方案来对数据库场景进行专项优化,充分利用 RDMA 天然的性能优势:

RDMA 技术是用户空间进程绕过内核直接调用 RDMA 网卡,实现和远端进程的高效快速通讯。RDMA 伴生于 InfiniBand 网络技术,由 IBTA 组织对其进行标准化定义和维护。RDMA 技术优势可以解决 TCP 传输方式中的各种缺点:

整个数据传输过程内存零拷贝。

网络传输完全卸载到网卡硬件,不占用 CPU 资源。

使用 RDMA 技术可以 100% 利用网络带宽。

整个数据传输过程由硬件完成,降低了系统延时。

NVIDIA RDMA 网络方案

助力远端计算和存储网络优化

NVIDIA RDMA 网络方案搭在硬件上使远端计算和存储网络的优化效果达到最优。

在 RDMA 与 TCP 性能的关键指标的对比测试中,RDMA 体现了其优势。例如从oplog msg 性能数据上看,RDMA 测延迟比 TCP 降低 71.7%,吞吐提高 43.2%;在 page 性能数据方面(page 大小为16KB),RDMA 测延迟比 TCP 降低 70.3%,吞吐提高 52.3%。

腾讯云数据库是腾讯服务的基础架构,网络的延迟和带宽对于性能至关重要, RDMA 技术的 Kernel Bypass 和 CPU Offload 可以带来极低的延迟和极高的带宽。在 NVIDIA 网络产品上部署的推荐系统将为腾讯用户提供业界一流的性能,使用户充分享受 RDMA 带来的技术红利。

—— 腾讯云数据库TDSQL-C负责人

李志阳

NVIDIA 作为 RDMA 技术的推动者和领跑者,很高兴看到这项技术在腾讯得到越来越广泛的应用,并正在从传统的 HPC/AI 业务拓展到高性能存储和数据库领域。UCX 的使用大幅度提高了 RDMA 应用的开发效率和吞吐率,并且使得 RoCE 跟客户应用能迅速整合,从而帮助客户更快走向市场,并提供差异化的云产品和服务。

—— NVIDIA 副总裁

Vadim Balahovski

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

审核编辑:彭菁
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4588

    浏览量

    101702
  • 服务器
    +关注

    关注

    12

    文章

    8111

    浏览量

    82495
  • 数据库
    +关注

    关注

    7

    文章

    3590

    浏览量

    63365

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    通过Modbus读写数据库中的数据

    用Modbus poll测试了,以下是智能网关的网络参数和测试截图: 通过智能网关的串口同样可以读写数据库。IGT-SER系列智能网关也支持作为Mobus主站,读取Modbus从站/服务端的数据后,插入或者更新到
    发表于 03-14 13:44

    持续发展理论在绿色校园设计中的应用

    电子发烧友网站提供《可持续发展理论在绿色校园设计中的应用.docx》资料免费下载
    发表于 01-31 09:10 0次下载

    持续发展理论在绿色校园设计中的应用

    电子发烧友网站提供《可持续发展理论在绿色校园设计中的应用.docx》资料免费下载
    发表于 01-10 10:57 0次下载

    英飞凌入选全球最具可持续发展能力的企业

    相关业务的英飞凌科技管理委员会成员、首席数字化转型官ElkeReichart负责可持续发展相关业务的英飞凌科技管理委员会成员、首席数字化转型官ElkeReichart表示
    的头像 发表于 12-22 08:14 232次阅读
    英飞凌入选全球最具可<b class='flag-5'>持续发展</b>能力的企业

    持续科技,引领电子产业链新范式!华秋喜获“2023深圳行业领袖企业100强”称号

    行业的发展新趋势。 展望未来,华秋将继续深化改革,优化管理,推动企业的可持续发展。同时,华秋也将积极拓展市场,扩大业务范围,为更多的客户提供优质的产品和服务。华秋将继续秉持创新精神和发展
    发表于 12-08 09:55

    浪潮信息赵帅:实现算力全流程绿色化,推动数据中心可持续发展

      近日,2023 IDC中国可持续发展峰会在北京顺利召开。大会以"铸就可持续发展业务的绿色科技"为主题,从IDC ESG洞察、先锋企业低碳化案例研究及合作伙伴解决方案等方面
    的头像 发表于 11-28 09:12 467次阅读

    2023 IDC中国可持续发展峰会落幕 软通动力ESG项目入选可持续发展先锋案例

    11月23日,2023IDC中国可持续发展峰会在北京成功举办,现场会聚数百名来自科技领域的专业人士和知名专家学者,峰会以“铸就可持续发展业务的绿色科技”为主题,围绕IDC ESG洞察、先锋企业低碳化
    的头像 发表于 11-24 15:30 218次阅读
    2023 IDC中国可<b class='flag-5'>持续发展</b>峰会落幕 软通动力ESG项目入选可<b class='flag-5'>持续发展</b>先锋案例

    关于PLC设备对接ORACLE数据库上传查询数据

    IGT-DSER实现欧姆龙NJ/NX系列的PLC与数据库服务器双向通讯,网关支持MySQL和SQLServer、PostgreSQL以及Oracle,这里选择的是Oracle。实际网络结构如下图1。 通过\'功能
    发表于 10-12 15:34

    英码科技精彩亮相火爆的IOTE 2023,多面AIoT产业发展

    主题演讲,与生态伙伴们共同探讨AIoT产业发展新生机。 英码科技精彩亮相 多面AIoT产业发展 英码科技是行业领先的AIoT创新产品和解决方案
    发表于 09-25 10:03

    【直播预告】HarmonyOS极客松直播第二期:数据库网络连接开发

    HarmonyOS极客松直播第二期:数据库网络连接开发
    发表于 06-26 15:13

    华为云数据库GaussDB:数字化转型和可持续发展的更优选择

    转型和可持续发展的更优选择。 GaussDB广泛应用在关键信息基础设施行业,并经历了全球顶尖银行和运营商,包括华为内部终端云服务和华为集团IT等严苛场景的商用考验。它是企业数字化转型、核心业务上云、分布式改造的可信之选。 然而,
    的头像 发表于 06-14 23:01 331次阅读

    IBM 与 SAP 最新联合报告:ERP 已成企业推动可持续发展的“利器”

    的透明的业务数据。但是对企业来说,像管理财务绩效一样严格管理可持续发展绩效,往往又是必要的。解决这个问题的最佳策略,就是运用 ERP 系统这个数据“中枢”。 为了解组织如何运用 ERP
    的头像 发表于 06-12 18:15 421次阅读
    IBM 与 SAP 最新联合报告:ERP 已成企业推动可<b class='flag-5'>持续发展</b>的“利器”

    世界环境日,OPPO发布《2022年可持续发展报告》

    在世界环境日之际,OPPO正式发布《2022年可持续发展报告》。这是自2020年起OPPO连续第三年发布可持续发展报告,展示了其在可持续发展领域的未来规划,以及围绕和谐运营、环境保护、员工福祉、技术普惠、生态共融五大领域的实践成
    的头像 发表于 06-05 15:15 768次阅读
    世界环境日,OPPO发布《2022年可<b class='flag-5'>持续发展</b>报告》

    中兴通讯正式发布2022年度可持续发展报告

    近些年,一系列环境与气候问题,让大家意识到可持续发展已成为必然之举。而实行可持续发展,中兴通讯一直在路上。 今天,中兴通讯正式发布2022年度可持续发展报告,这是我们连续十五年每年主动向社会
    的头像 发表于 05-26 10:13 782次阅读
    中兴通讯正式发布2022年度可<b class='flag-5'>持续发展</b>报告

    华邦电子以绿色产品设计为可持续发展设立标杆

    全球半导体存储解决方案领导厂商华邦电子公布了企业的可持续发展成果,并设置了可持续发展目标和极具针对性的产品研发计划,期望在 2023 年持续巩固其在绿色
    的头像 发表于 05-08 17:05 914次阅读
    华邦电子以绿色产品设计为可<b class='flag-5'>持续发展</b>设立标杆