RDMA 高性能 IP：超越不是梦想

xianuser · 发表于 2024-6-22 10:41:25

马上注册，结交更多好友，享用更多功能，让你轻松玩转社区。

您需要登录才可以下载或查看，没有账号？注册

x

本帖最后由 xianuser 于 2024-6-22 23:26 编辑

在xilinx开发平台测试，网卡支持100G，选用的是CX455A-ECAT 100Gbe。
实测数据：
SEND  71Gbps
READ  91 Gbps （PC端给FPGA发包，受PC性能限制多一点）
WRITE 96 Gbps

感兴趣的请看视频：
https://www.bilibili.com/video/B ... id_from=333.999.0.0

垂询 V ： zzbxidian
   email ：zbzeng@163.com

Eeking · 发表于 2024-6-22 12:28:29

100G 厉害厉害

xianuser · 发表于 2024-6-22 22:45:57

希望共同发展

xianuser · 发表于 2024-6-22 23:26:26

本帖最后由 xianuser 于 2024-6-23 10:52 编辑

更新：该 IP支持 RDMA RoCE v2，虚拟化是支持的。

ether_king · 发表于 2024-6-23 06:54:02

with pcie interface?

xilinx has ernic ip and demo, which is for rocev2.

xianuser · 发表于 2024-6-23 11:01:34

ether_king 发表于 2024-6-23 06:54
with pcie interface?

xilinx has ernic ip and demo, which is for rocev2.

We use Mellanox MCX455A-ECAT，which has PCIe interface. Please see datasheet: Mellanox MCX455A-ECAT 数据表 (genuinemodules.com)

The IP supports RDMA RoCE v2. With the IP, all you need is an optical fiber and a PCIe-capable network card at both ends, such as the Mellanox MCX455A-ECAT.

RDMA IP.png

xianuser · 发表于 2024-6-29 21:25:58

有人问R/W延迟。
实测 R/W延迟小于5us。

xianuser · 发表于 2024-8-4 23:17:16

GPU上能用RDMA？ nvlink不是挺看好的？

xianuser · 发表于 2024-8-24 22:36:05

初步调研发现NVLINK只适合点对点近距离通信，目前市场反应不强烈。而支持RoCE V2的RDMA可以节点多点之间高速数传，期望它有用于多GPU之间通信的那一天。

xianuser · 发表于 2024-9-17 16:52:29

R/W 延迟：小于5 us。

[原创] RDMA 高性能 IP：超越不是梦想

马上注册，结交更多好友，享用更多功能，让你轻松玩转社区。

站长推荐 /2