基于 iwarp 的 lustre 性能测试

    近期在做集群网络的升级方案，涉及到网络设备有交换机、线缆、网卡。过程中测试了不少网络厂商的设备，这里主要记录下在测试Chelsio网卡时的一些问题。
    
    

测试内容

• 网卡带宽
• 网卡延迟（TCP/iwarp）
• lustre on iwarp

对于网卡带宽以及延迟的检测，此处不再进行详细说明，因其测试过程相对简易，只需执行iperf和ib_write等工具即可完成；本文重点记录在lustre系统中如何配置并激活iwarp功能。

测试环境配置与说明

直接展示图表：

本系统中，Lustre文件系统的后端存储设备采用DDN/SFA7700x型号的存储阵列，配置包含60块7.2K NL-SAS硬盘。存储系统与IO节点之间通过InfiniBand网络进行互联，IO节点对外连接则使用Chelsio T580-LP-CR型号的40Gb网卡。客户端配置包括两种网络接口，分别为40Gb和10Gb网卡。

环境部署配置与实施

OFED安装指南

尽管Mellonax与Chelsio网卡的驱动