- 2024-07-04
-
发表了主题帖:
高性能 RDMA IP简介:通用性强,性能更出众
RDMA IP开发的目的
本IP开发的目的是研究一款适合于XILinx FPGA端的通用性强,性能优越的RDMA IP开发。它与PC之间高速通信只需一根光纤(当然,PC端需要转接卡,将光纤转入PC端,例如100G的CX455A-ECAT 100Gbe 网卡 就可以)。
RDMA架构
该架构如下:
由于该IP为纯逻辑设计,使用该IP前需要简单的设置,我们采用的xilinx VCU118开发板,对IP的简单控制由Microblaze完成。如果是ZYNQ系列,可以在ARM核内部完成。这里DDR负责读写等数据缓存。该结构也是便于后续NVMe oF 开发。
性能测试
在xilinx开发平台测试,网卡支持100G,选用的是CX455A-ECAT 100Gbe。支持RDMA RoCE v2协议。
实测数据:
SEND 71 Gbps
READ 91 Gbps (PC端给FPGA发包,受PC性能限制多一点)
WRITE 96 Gbps
R/W 延迟: 按传64B测试条件下:小于5 us 。
感兴趣的请看视频:
https://www.bilibili.com/video/BV1mPV5eCE8z/?spm_id_from=333.337.search-card.all.click
或者B站搜 用户名: 专注与守望, 或搜内容 RDMA IP。
- 2024-06-29
-
发表了主题帖:
高性能 RDMA IP简介:通用性强,性能更出众
本帖最后由 xianuser 于 2024-6-29 21:40 编辑
RDMA IP开发的目的
本IP开发的目的是研究一款适合于XILinx FPGA端的通用性强,性能优越的RDMA IP开发。它与PC之间高速通信只需一根光纤(当然,PC端需要转接卡,将光纤转入PC端,例如100G的CX455A-ECAT 100Gbe 网卡 就可以)。
RDMA架构
该架构如下:
对IP的简单控制由Microblaze完成,DDR负责读写等数据缓存。该结构也是便于后续NVMe oF 开发。
性能测试
在xilinx开发平台测试,网卡支持100G,选用的是CX455A-ECAT 100Gbe。支持RDMA RoCE v2协议。
实测数据:
SEND 71 Gbps
READ 91 Gbps (PC端给FPGA发包,受PC性能限制多一点)
WRITE 96 Gbps
R/W 延迟: 小于5 us 。
感兴趣的请看视频:
https://www.bilibili.com/video/BV1mPV5eCE8z/?spm_id_from=333.337.search-card.all.click
或者B站搜 用户名: 专注与守望, 或搜内容 RDMA IP。
- 2024-06-23
-
发表了主题帖:
高性能 RDMA IP:通用性强,性能更出众
本帖最后由 xianuser 于 2024-6-23 21:56 编辑
本IP开发的目的是研究一款适合于FPGA端的通用性强,性能优越的RDMA IP开发。它与PC之间高速通信只需一根光纤(当然,PC端需要转接卡,将光纤转入PC端,例如100G的CX455A-ECAT 100Gbe 网卡 就可以)。
在xilinx开发平台测试,网卡支持100G,选用的是CX455A-ECAT 100Gbe。支持RDMA RoCE v2协议。
实测数据:
SEND 71 Gbps
READ 91 Gbps (PC端给FPGA发包,受PC性能限制多一点)
WRITE 96 Gbps
感兴趣的请看视频:
https://www.bilibili.com/video/BV1mPV5eCE8z/?spm_id_from=333.337.search-card.all.click
或者B站搜 用户名: 专注与守望, 或搜内容 RFID IP。
一开始觉得 RDMA较难开发,资料比NVMe厚多了;可供参考的资料太少。但毕竟开发过NVMe host IP,积累一些经验,同时也是感受到相关的需求,就决定开发,幸不辱使命。后续会分享相关文档。
补充内容 (2024-7-3 16:22):
更正:B站搜内容 RDMA IP,或者NVMe IP也能找到