跳到正文
热点事件持续更新

K8s 中 RDMA Pod 的 sysctl 配置实践分享

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

作者 asaiacai 分享了在 Kubernetes 中为 RDMA Pod 配置 sysctl 的实践。在配备 16 条 RoCE 链路的 GPU 节点上,Linux 默认将 IP 地址视为主机所有而非接口所有,导致 RDMA 出现 ib_write_bw 在 16 条链路中 6 条失败、ARP 解析到错误链路 MAC、NCCL 报 ibv_modify_qp 失败等问题。作者称修复方法始终是几个 sysctl,难点在于 Kubernetes 中这些配置应放在哪里。 作者称测试于 2026 年 6 月至 10 月进行,多数在 OKE 上的 A100 节点对(BM.GPU.B4.8 和 BM.GPU4.8,各 8 块 GPU、16 条 RoCE 链路)上完成,IPv6 部分多在 B300 和 GB300 节点上运行。由于 /proc/sys 默认只读,Pod 必须以 privileged 模式运行。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. Hacker News
    Kubernetes 中 RDMA Pod 的 sysctl 配置实践

    在配备 16 条 RoCE 链路的 GPU 节点上,Linux 默认将 IP 地址视为主机所有而非接口所有,导致 RDMA 出现 ib_write_bw 在 16 条链路中 6 条失败、ARP 解析到错误链路 MAC、NCCL 报 ibv_modify_qp 失败等问题。

本事件热度走势

可比范围当前
9
可比范围峰值
1011月4日 04:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。