尧图网站设计 尧图网站设计YAOTU DESIGN
ARTICLE DETAIL

资讯详情

深耕网站设计与一线实操的经验洞察。

哪些 GPU 可以支持 GDAKI

哪些 GPU 可以支持 GDAKI Turing 架构T4、RTX 8000 等可以支持 GDAKI不是只有 Ampere 才能支持。甚至 VoltaV100在现有软件栈下也可以支持。一、GDAKI 的硬件依赖本质GDAKIGPU Direct Async Kernel-Initiated的核心机制是GPU SM 线程直接通过 PCIe P2P 映射访问 NIC 的 Doorbell Register从而从 CUDA Kernel 内部触发 RDMA 操作。这依赖于两个底层能力能力所需硬件支持架构要求GPUDirect RDMA数据路径NIC 直接 DMA 读写 GPU 显存Kepler 及以后GPUDirect Async控制路径GPU 映射第三方 PCIe 设备 BAR 空间Pascal 及以后GDAKI 本质上是 GPUDirect Async 的进化版其硬件门槛与 GPUDirect Async 相同。二、各架构支持情况TuringT4、RTX 8000—— ✅ 完整支持Turing 架构Compute Capability 7.5完全具备GPU Peer Mapping 到 NIC BAR 空间的能力Pascal 已引入Turing 继承CUDA Stream Memory OperationsMemOpsAPI 支持与 ConnectX-6 配合的 GPUDirect RDMA 数据路径从 NVIDIA 官方测试矩阵来看GPUDirect Storage依赖同样的 RDMA Async 基础明确在Turing (T4)上验证通过VoltaV100—— ✅ 支持但需注意 CUDA 版本天花板V100Compute Capability 7.0同样支持 GPUDirect RDMA 和 GPUDirect AsyncMVAPICH2-GDR 早在 2017 年就添加了对 Volta (V100) 的 GPUDirect RDMA 支持DPDK 的 CUDA driver library 也将Volta (V100)列为最低支持的 GPU 架构之一但有一个关键限制CUDA 13 可能不再支持 Compute Capability 7.0V100。已有社区报告显示 V100 在 CUDA 13 上出现not supported错误而 GDAKI / DOCA GPUNetIO 目前要求CUDA 12.2V100 在这个范围内完全可用。但如果未来 DOCA 版本要求 CUDA 13V100 将被排除。AmpereA100 等—— ✅ 最佳支持Ampere 是 NVIDIA 当前测试和优化的主要目标架构支持 PCIe Gen 4P2P 带宽更高DOCA GPUNetIO 的 CI 测试基线使用 Ubuntu 24.04 DOCA 3.1 (GPUNetIO) image所有新特性如 NVLink SHARP、MIG 配合 GDAKI优先在 Ampere 上验证三、你的硬件平台对照你的 GPU架构CCGDAKI 支持注意事项V100Volta7.0✅ 支持受限于 CUDA 13DOCA 当前版本可用T4Turing7.5✅ 支持完全支持但显存带宽和算力低于 V100RTX 8000Turing7.5✅ 支持同 T448GB 显存是优势Quadro RTX 8000Turing7.5✅ 支持NVIDIA 官方 GPUDirect RDMA 支持列表明确包含四、实际使用 GDAKI 的完整条件除了 GPU 架构GDAKI 还需要同时满足以下条件条件要求NICConnectX-6 Dx 或更新CX-6 Dx、CX-7、BF-3 等CUDA≥ 12.2驱动需启用PeerMappingOverride1和EnableStreamMemOPs1内核模块nvidia_peermem或nvidia_p2p加载PCIe 拓扑GPU 与 NIC 需在同一个 PCIe Switch 下或 Root Complex 下避免跨 NUMA 节点驱动配置示例/etc/modprobe.d/nvidia.confoptions nvidiaNVreg_EnableStreamMemOPs1NVreg_RegistryDwordsPeerMappingOverride1;五、总结TuringT4、RTX 8000完全可以支持 GDAKI不是 Ampere 独占。VoltaV100目前也支持但受 CUDA 版本天花板限制 CUDA 13。如果你的目标是实验 GDAKIT4 或 RTX 8000 ConnectX-6 是可行的硬件组合。如果你要部署生产环境AmpereA100是 NVIDIA 当前的主力验证平台稳定性和性能优化更成熟。
返回列表