0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA RDMA 网络方案赋能数据库业务持续发展

NVIDIA英伟达 ? 来源:NVIDIA英伟达 ? 作者:NVIDIA英伟达 ? 2022-01-04 17:31 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

云原生数据库 TDSQL-C (原 CynosDB,TDSQL for Cloud Native Database) 是腾讯云自研的新一代高性能高可用的企业级分布式云数据库, TDSQL-C 使用 NVIDIA UCX RDMA 优化了关键路径系统性能,实现了超百万级 QPS 的高吞吐,128TB 海量分布式智能存储,保障了数据安全可靠。

云原生数据库 TDSQL-C 实现高性能面临挑战

TDSQL-C 采用计算存储分离的架构,可以快速进行节点的扩容,节点的迁移,但其引入的网络开销对实现高性能提出了更高的挑战。因此需要采用软件优化与新硬件相结合,通过基于 SPDK 和 UCX RDMA 的零拷贝技术,减少了操作系统上下文切换以及数据在用户态和内核态之间拷贝引起的性能损耗,进一步优化关键路径的系统性能,降低请求延迟。

传统的 TCP/IP 网络,存在以下几个缺点:应用的 buffer 发送到对端,需要经过多次拷贝,对端收到数据到接收到应用的接收 buffer,也需要多次拷贝;应用的 buffer 拷贝到 TCP/IP 的 buffer,需要从用户态进入到内核态,会有上下文切换;网络协议栈完全由 CPU 执行,耗费 CPU。

NVIDIA RDMA 网络方案+ConnectX 系列网卡

“软硬” 兼施,赋能数据库业务持续发展

充分利用软硬件资源做系统级别 Scale Out、Scale Up、 RDMA 等 Kernel ByPass 的低延时网络基础。以底层高性能硬件能力作为支柱,给腾讯云数据库业务发展提供持续不断的系统源动力。

根据业务部门需求和服务器新产品导入团队多年来在 RDMA 技术上的沉淀, 推荐使用搭载 NVIDIA ConnectX 系列网卡的服务器,使用 NVIDIA RDMA 网络方案来对数据库场景进行专项优化,充分利用 RDMA 天然的性能优势:

RDMA 技术是用户空间进程绕过内核直接调用 RDMA 网卡,实现和远端进程的高效快速通讯。RDMA 伴生于 InfiniBand 网络技术,由 IBTA 组织对其进行标准化定义和维护。RDMA 技术优势可以解决 TCP 传输方式中的各种缺点:

整个数据传输过程内存零拷贝。

网络传输完全卸载到网卡硬件,不占用 CPU 资源。

使用 RDMA 技术可以 100% 利用网络带宽。

整个数据传输过程由硬件完成,降低了系统延时。

NVIDIA RDMA 网络方案

助力远端计算和存储网络优化

NVIDIA RDMA 网络方案搭在硬件上使远端计算和存储网络的优化效果达到最优。

在 RDMA 与 TCP 性能的关键指标的对比测试中,RDMA 体现了其优势。例如从oplog msg 性能数据上看,RDMA 测延迟比 TCP 降低 71.7%,吞吐提高 43.2%;在 page 性能数据方面(page 大小为16KB),RDMA 测延迟比 TCP 降低 70.3%,吞吐提高 52.3%。

腾讯云数据库是腾讯服务的基础架构,网络的延迟和带宽对于性能至关重要, RDMA 技术的 Kernel Bypass 和 CPU Offload 可以带来极低的延迟和极高的带宽。在 NVIDIA 网络产品上部署的推荐系统将为腾讯用户提供业界一流的性能,使用户充分享受 RDMA 带来的技术红利。

—— 腾讯云数据库TDSQL-C负责人

李志阳

NVIDIA 作为 RDMA 技术的推动者和领跑者,很高兴看到这项技术在腾讯得到越来越广泛的应用,并正在从传统的 HPC/AI 业务拓展到高性能存储和数据库领域。UCX 的使用大幅度提高了 RDMA 应用的开发效率和吞吐率,并且使得 RoCE 跟客户应用能迅速整合,从而帮助客户更快走向市场,并提供差异化的云产品和服务。

—— NVIDIA 副总裁

Vadim Balahovski

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

审核编辑:彭菁
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5348

    浏览量

    106845
  • 服务器
    +关注

    关注

    13

    文章

    9859

    浏览量

    88416
  • 数据库
    +关注

    关注

    7

    文章

    3948

    浏览量

    66795

原文标题:NVIDIA RDMA 网络助力腾讯云数据库突破性能瓶颈

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    爱立信荣获FutureNet World 2025网络持续发展

    爱立信近日凭借其5G Advanced自动化节能解决方案荣获 FutureNet World"网络持续发展奖"
    的头像 发表于 07-30 10:47 ?711次阅读

    NVIDIA在可持续发展领域的实践

    在最新发布的 NVIDIA 2025 财年可持续发展报告开篇的一封信中,NVIDIA 创始人兼首席执行官黄仁勋以深远的视野勾勒出 AI 时代的新工业革命图景。他指出,AI 不仅正在重塑每一个行业
    的头像 发表于 07-09 16:44 ?559次阅读

    数据库数据恢复—SQL Server数据库被加密如何恢复数据

    SQL Server数据库故障: SQL Server数据库被加密,无法使用。 数据库MDF、LDF、log日志文件名字被篡改。
    的头像 发表于 06-25 13:54 ?225次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—SQL Server<b class='flag-5'>数据库</b>被加密如何恢复<b class='flag-5'>数据</b>?

    NVIDIA AI技术助力欧洲医疗健康行业发展

    从构建全球规模最大的生物多样性数据库,到打造罕见病研究的 AI 工厂,NVIDIA 的 AI 初创企业生态系统正持续为欧洲医疗健康领域注
    的头像 发表于 06-19 14:40 ?2812次阅读

    2025中兴通讯“创兴日”ESG可持续发展论坛圆满落幕

    近日,2025中兴通讯“创兴日”ESG可持续发展论坛在深圳举办。本次论坛以“数智ESG 共筑绿色新未来”为主题,邀请政府专家、顶尖学者、知名企业、咨询机构等齐聚一堂,围绕 ESG可持续发展
    的头像 发表于 06-04 16:42 ?748次阅读

    智能通信网络设计引擎:VDE Cloud未来汽车网络研发

    VDE Cloud 作为一款基于B/S架构的车载总线通信数据库设计和管理系统,为汽车智能通信网络设计深度
    的头像 发表于 05-13 13:44 ?450次阅读
    智能通信<b class='flag-5'>网络</b>设计引擎:VDE Cloud<b class='flag-5'>赋</b><b class='flag-5'>能</b>未来汽车<b class='flag-5'>网络</b>研发

    安科瑞:以综合效管理解决方案能人工智能时代的数据中心可持续发展

    在人工智能与可持续发展的双重浪潮下,安科瑞凭借其综合效管理解决方案,不仅为数据中心行业提供了降本增效的实践路径,更推动了全球数字基础设施向绿色低碳转型。未来,随着技术的
    的头像 发表于 02-21 15:37 ?496次阅读
    安科瑞:以综合<b class='flag-5'>能</b>效管理解决<b class='flag-5'>方案</b>,<b class='flag-5'>赋</b>能人工智能时代的<b class='flag-5'>数据</b>中心可<b class='flag-5'>持续发展</b>

    数据库是哪种数据库类型?

    数据库是一种部署在虚拟计算环境中的数据库,它融合了云计算的弹性和可扩展性,为用户提供高效、灵活的数据库服务。云数据库主要分为两大类:关系型数据库
    的头像 发表于 01-07 10:22 ?558次阅读

    数据库数据恢复—Mysql数据库表记录丢失的数据恢复流程

    Mysql数据库故障: Mysql数据库表记录丢失。 Mysql数据库故障表现: 1、Mysql数据库表中无任何数据或只有部分
    的头像 发表于 12-16 11:05 ?724次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—Mysql<b class='flag-5'>数据库</b>表记录丢失的<b class='flag-5'>数据</b>恢复流程

    数据库数据恢复—通过拼接数据库碎片恢复SQLserver数据库

    一个运行在存储上的SQLServer数据库,有1000多个文件,大小几十TB。数据库每10天生成一个NDF文件,每个NDF几百GB大小。数据库包含两个LDF文件。 存储损坏,数据库
    的头像 发表于 10-31 13:21 ?761次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—通过拼接<b class='flag-5'>数据库</b>碎片恢复SQLserver<b class='flag-5'>数据库</b>

    智慧城市在可持续发展中的应用

    智慧城市在可持续发展中的应用体现在多个方面,它利用大数据、人工智能、物联网等先进技术,实现城市资源的高效利用、环境的保护、社会的包容性和经济的可持续发展。 一、经济可持续发展 智慧城市
    的头像 发表于 10-24 15:25 ?1586次阅读

    Oracle数据恢复—异常断电后Oracle数据库报错的数据恢复案例

    Oracle数据库的在线文件,需要恢复zxfg用户的数据。 Oracle数据库恢复方案: 检测数据库故障;尝试挂起并修复
    的头像 发表于 09-30 13:31 ?811次阅读
    Oracle<b class='flag-5'>数据</b>恢复—异常断电后Oracle<b class='flag-5'>数据库</b>启<b class='flag-5'>库</b>报错的<b class='flag-5'>数据</b>恢复案例

    华宝新荣获SEAL Awards可持续发展产品奖

    近日,SEAL Awards 2024年度获奖名单正式揭晓,继2023年获得此荣誉后,全球绿色新能源领军企业华宝新再度斩获本届“可持续发展产品奖”。这非凡荣誉的延续性不仅彰显公司在可持续发展领域的卓越表现,更是对其不懈努力和
    的头像 发表于 09-26 10:56 ?817次阅读

    数据库数据恢复—SQL Server数据库出现823错误的数据恢复案例

    SQL Server数据库故障: SQL Server附加数据库出现错误823,附加数据库失败。数据库没有备份,无法通过备份恢复数据库
    的头像 发表于 09-20 11:46 ?748次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b>恢复—SQL Server<b class='flag-5'>数据库</b>出现823错误的<b class='flag-5'>数据</b>恢复案例

    电科金仓:数智未来,国产数据库大有可为

    几十年来积累的技术底蕴,加之在众多行业中的实践验证与落地,为金仓数据库持续发展奠定了坚实的基础。同时,金仓还以其专业的服务体系、完善的生态构建以及对人才发展的不懈追求,构筑起了一道坚实的竞争壁垒。金仓
    的头像 发表于 09-03 13:58 ?495次阅读
    电科金仓:数智未来,国产<b class='flag-5'>数据库</b>大有可为