首页/新闻资讯/正文详情

DCQCN:大规模 RDMA 部署中的拥塞控制

发布时间:2026/11/23 1:23:56 来源:云帆数科 栏目:资讯中心
DCQCN:大规模 RDMA 部署中的拥塞控制
DCQCN:大规模 RDMA 部署中的拥塞控制《Congestion Control for Large-Scale RDMA Deployments》详细中文解读阅读说明与总览这份文档不是只讲结论的摘要,而是按论文的论证顺序做“伴读式”解读。论文中的图、算法框和实验图均直接裁取自原 PDF;中文部分负责解释图中每个轴、曲线、参数和实验结论。参考文献列表不逐条翻译,但正文对相关工作的比较会保留。阅读主线需求证明(为什么 TCP/PFC 不够) → 算法设计(CP/NP/RP 如何协作) → 缓冲区阈值(ECN 必须先于 PFC) → 流体模型与调参 → 真实测试床验证 → 局限与适用边界。论文部分要回答的问题关键证据§1–§2 动机为什么数据中心需要 RDMA?为什么仅有 PFC 会出问题?Fig.1–4§3 算法交换机、接收端、发送端分别做什么?Fig.5–9;式(1)–(4)§4 缓冲区怎样保证先 ECN、后 PFC、且不丢包?t_flight、t_PFC、t_ECN 的上界关系§5 模型参数为何这样选?公平与稳定如何权衡?Table 1–2;Fig.10–12§6 结果实际硬件是否与模型一致?生产型流量是否受益?Fig.13–19§7–§9 边界多瓶颈、随机丢包、死锁和未来演进怎么办?Fig.20–21先建立三个概念PFC(Priority-based Flow Control):链路级、逐端口/优先级的暂停机制。反应很快,但不知道“哪一条流”真正制造了拥塞。ECN/CNP:交换机在拥塞时给数据包打 CE 标记,接收端再向发送端回一个 CNP。它能把拥塞反馈落到具体流上。DCQCN:运行在 RoCEv2 NIC 上的速率型端到端控制。交换机只需已有的 RED/ECN 能力,不要求定制 ASIC。1. 引言:论文真正要解决的工程矛盾现代数据中心中的云存储、分布式内存缓存和机器学习通信,同时要求 40Gbps 级带宽、每跳低于 10μs 的时延,以及极低的 CPU 占用。传统内核 TCP/IP 栈在这些目标之间难以兼得:高吞吐意味着大量协议处理、拷贝和中断;而 RDMA 把传输协议放到 NIC 中,直接访问预注册内存,绕过主机协议栈,因此能同时降低 CPU 与时延。历史上的 InfiniBand 通过专有链路层和逐跳信用机制构建无损网络,但大型云数据中心已经以 Ethernet/IP 为基础,不愿再维护第二套网络。RoCEv2 因此保留 IB 传输语义,用 UDP/IP 封装完成三层路由和 ECMP,并依赖以太网 PFC 构造近似无损的链路层。矛盾随之出现:PFC 的暂停粒度是端口(或端口+优先级),并非流。一条拥塞流触发 PAUSE,可能把同端口上本来不拥塞的流一起冻结,继而产生队头阻塞、拥塞扩散和不公平。论文的目标是增加逐流控制,让 PFC 从常态控制退回到短时保护。设计约束必须支持 L3 路由网络;端主机 CPU 开销要很低;无拥塞时要“超快启动”;交换机只能使用现成 RED/ECN;算法必须能放进 NIC 的定时器、计数器和速率限制器。2. 为什么需要 DCQCN2.1 TCP 与 RDMA 的吞吐、CPU 和时延原图 Fig.1:TCP 与 RDMA 的吞吐、CPU 消耗和 2KB 消息时延实验环境是两台 40Gbps 服务器经一台 40Gbps 交换机直连。TCP 侧已开启 LSO、RSS、零拷贝并用 16 个线程;RDMA 用单线程 IB READ 即可打满链路。图 1(a) 中,RDMA 从 4KB 消息开始就接近线速;TCP 在 4KB、16KB 时明显受 CPU 限制,到 64KB 以后才接近线速。图 1(b) 的重点不是某个单核是否满载,而是全机总 CPU 周期。4MB 消息下 TCP 为维持满速仍消耗约 20% 的总 CPU;小消息时 TCP 服务器 CPU 超过 80%,并成为吞吐瓶颈。RDMA 客户端始终约在 3% 以下,服务器端几乎不占 CPU,因为数据搬运和协议处理由 NIC 完成。图 1(c) 测量预建连、预热、关闭 Nagle、无背景流量时的 2KB 用户态延迟:TCP 为 25.4μs;RDMA READ/WRITE 为 1.7μs;RDMA SEND 为 2.8μs。论文用这组数据说明,RDMA 的优势不仅是吞吐,更在于避免 CPU 参与关键路径。如何看这张图它证明的是“在论文所用的 2015 年软件栈与硬件下,常规 TCP 栈不满足目标”,而不是宣称任何时代、任何 TCP 实现都必然慢十倍。结论的工程内核仍成立:协议下沉和零拷贝能显著减少 CPU 与尾时延。2.2 PFC 的两个结构性缺陷原图 Fig.2:三层 Clos 测试床拓扑

相关推荐

Next操作工程实践:从Python迭代器到SQL分页的稳定性设计
Next操作工程实践:从Python迭代器到SQL分页的稳定性设计

如果你在搜索 Next 相关技术资料时,发现结果里混杂着大量无关的时尚电商、相机品牌、数学算法甚至字体教程,这其实反映了一个很有意思的现象:同一个词在不同技术领域里可能指向完全不同的东西,而真正有价值的工程经验,… · 2026/11/23 1:23:54

MarkView:纯前端 Markdown 实时预览工具的架构设计
MarkView:纯前端 Markdown 实时预览工具的架构设计

MarkView 是一个纯前端的本地 Markdown 实时预览工具(https://markview.art):左侧 CodeMirror 6 编辑,右侧实时渲染,所有数据保存在浏览器 IndexedDB 中,无需任何后端。支持暗色/浅色主题、命令面板、URL 分… · 2026/11/23 1:23:55

Ubuntu 24.04下NVIDIA驱动与CUDA安装优化指南
Ubuntu 24.04下NVIDIA驱动与CUDA安装优化指南

1. Ubuntu 24.04下NVIDIA驱动与CUDA工具包安装指南 刚装完Ubuntu 24.04准备跑深度学习时,最头疼的就是显卡驱动和CUDA环境配置。上周给实验室三台工作站装机时,就遇到NVIDIA-SMI报错"couldnt communicate with the NVIDIA driver"的经典问题。… · 2026/10/31 19:12:43

工地太忙根本没时间复习考试?考电工证交社保合适吗怎么报名全攻略
工地太忙根本没时间复习考试?考电工证交社保合适吗怎么报名全攻略

工地太忙根本没时间复习考试?考电工证交社保合适吗怎么报名全攻略 工地太忙根本没时间复习考试,这是很多一线工人心里的无奈。特别是像三门峡这样的工程类毕业生,刚出校门就投身工地,一边要跟上施工节奏,一边还要抽空准备电工证考试,简直是两头难。更让… · 2026/11/23 1:23:07

济宁邹城电工证怎么考网上查询全攻略别怕考不过白交培训费
济宁邹城电工证怎么考网上查询全攻略别怕考不过白交培训费

济宁邹城电工证怎么考网上查询全攻略别怕考不过白交培训费 怕考不过白交培训费?现在网上查询济宁邹城电工证怎么考的小伙伴越来越多,尤其是打算从事电气相关工作的朋友,但很多人第一次接触特种作业证报考,对流程、要求、通过率都一知半解,生怕钱花了事没… · 2026/11/23 1:23:07

电工证培训哪家专业怎么考 良心建议来了怕考不过白交培训费
电工证培训哪家专业怎么考 良心建议来了怕考不过白交培训费

电工证培训哪家专业怎么考 良心建议来了怕考不过白交培训费 怕考不过白交培训费?你不是一个人。现在电工证培训市场鱼龙混杂,很多工人花了几千块报名,结果考试挂了、复审没通过、甚至证书被注销,钱打了水漂。这事儿不是个例,而是很多人都踩过的坑。如果… · 2026/11/23 1:23:07

哪种电工证被社会认可 电子证书怎么考才靠谱
哪种电工证被社会认可 电子证书怎么考才靠谱

哪种电工证被社会认可 电子证书怎么考才靠谱 你是不是也在为不知道去哪报名、怕被中介坑而发愁?别急,我这有真实经验,讲的是焦作市政公用工程从业者的实际操作,不绕弯子,直接上干货。现在考电工证, 电子证书… · 2026/11/23 1:23:07

邯郸电工证哪里考网上查询太慢?工地太忙根本没时间复习考试
邯郸电工证哪里考网上查询太慢?工地太忙根本没时间复习考试

邯郸电工证哪里考网上查询太慢?工地太忙根本没时间复习考试 工地太忙根本没时间复习考试,这几乎是每个特种作业人员的共同痛点。尤其是像电工证这类在建筑、电力行业必不可少的证件,没有它就无法上岗,但复习时间又极度有限,考试难度却不低,让人头疼。别… · 2026/11/23 1:23:07

江阴电工证去哪里报名网上查询怕考不过白交培训费怎么解决
江阴电工证去哪里报名网上查询怕考不过白交培训费怎么解决

江阴电工证去哪里报名网上查询怕考不过白交培训费怎么解决 怕考不过白交培训费?这事儿真不少见,我见过太多人拿着钱去报名,结果考试一塌糊涂,培训费打水漂,连个证书都没拿到。其实你去【网上查询】一下,很多正规机构的报名流程、培训内容、考试难度都写… · 2026/11/23 1:22:07

平价的电工证查询保姆级教程:别被中介坑,一步步教你搞定
平价的电工证查询保姆级教程:别被中介坑,一步步教你搞定

平价的电工证查询保姆级教程:别被中介坑,一步步教你搞定 你是不是也经常在网上看到“平价的电工证查询”这样的关键词,但又不知道去哪报名,怕被中介坑?特别是像你这样的平顶山学员,既想考个正规电工证,又怕花冤枉钱走弯路。别担心,这篇保姆级教程就是… · 2026/11/22 0:00:42

麻阳考电工证在哪里考内部消息你知道吗
麻阳考电工证在哪里考内部消息你知道吗

麻阳考电工证在哪里考内部消息你知道吗 不知道去哪报名怕被中介坑, 内部消息 告诉你,麻阳考电工证不一定要去外地,本地其实也有正规渠道,但很多人因为不了解流程和资质,反而被坑了钱还考不到证。今天我就从一个干了这么多年特种作业培训的“老江湖”角… · 2026/11/22 0:00:43

揭阳普宁电工证换证怎么操作?良心建议帮你理清流程
揭阳普宁电工证换证怎么操作?良心建议帮你理清流程

揭阳普宁电工证换证怎么操作?良心建议帮你理清流程 之前考的证在外省能不能转过来?这是很多已经在外地工作、现在想回揭阳普宁发展的电工朋友最关心的问题。如果你也是其中之一,那这篇文章就是为你们量身定制的,从换证流程到避坑建议,良心建议全给你讲透… · 2026/11/22 0:00:43

工地太忙根本没时间复习考试?泗阳电工证快速办理内部消息全在这了
工地太忙根本没时间复习考试?泗阳电工证快速办理内部消息全在这了

工地太忙根本没时间复习考试?泗阳电工证快速办理内部消息全在这了 工地太忙根本没时间复习考试,尤其是像你这样在信阳水利工程一线打拼的老电工,天天跟钢筋水泥打交道,哪还有空去背那些考试题?更别提现在办证流程越来越复杂,稍有不慎就可能耽误项目进度… · 2026/11/23 0:00:44

低压电工证复证材料千万别踩坑!这些材料你准备好了吗?
低压电工证复证材料千万别踩坑!这些材料你准备好了吗?

低压电工证复证材料千万别踩坑!这些材料你准备好了吗? 证书过期了不知道怎么复审延期?你不是一个人!现在不少电工朋友都在为低压电工证复证材料发愁,怕流程复杂、怕材料不全、怕耽误工作。其实,只要准备充分,复审一点都不难。今天就来带你一步步搞清楚… · 2026/11/23 0:00:44

上海哪里考电工证便宜真实经历分享:实操考试心里没底怕挂科
上海哪里考电工证便宜真实经历分享:实操考试心里没底怕挂科

上海哪里考电工证便宜真实经历分享:实操考试心里没底怕挂科 实操考试心里没底怕挂科,这是很多准备考电工证的朋友的共同心声。尤其是在上海这样的大城市,报考渠道多、价格不一,很多人在报名前都会犹豫到底该去哪家机构,费用多少才算合理。我自己在驻马店… · 2026/11/23 0:00:44

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/22 20:41:13

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/21 15:19:30

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/22 23:39:58

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码