29.2. 使用 FC 的光纤的 NVMe over fabrics
与某些 Broadcom Emulex 和 Marvell Qlogic Fibre Channel 适配器一起使用时,在 initiator 模式中完全支持 NVMe over Fibre Channel (FC-NVMe)。作为系统管理员,完成以下部分中的任务来部署 FC-NVMe:
29.2.1. 为广播适配器配置 NVMe initiator
使用这个流程,使用 NVMe 管理命令行界面(
nvme-cli
)工具为 Broadcom 适配器客户端配置 NVMe initiator。
- 安装
nvme-cli
工具:#
yum install nvme-cli这会在/etc/nvme/
目录中创建hostnqn
文件。hostn
文件标识 NVMe 主机。生成一个新的hostnqn
:#
nvme gen-hostnqn - 使用以下内容创建
/etc/modprobe.d/lpfc.conf
文件:options lpfc lpfc_enable_fc4_type=3
- 重建
initramfs
镜像:# dracut --force
- 重启主机系统来重新配置
lpfc
驱动程序:# systemctl reboot
- 找到本地和远程端口的 WWNN 和 WWPN,并使用输出查找子系统 NQN:
#
cat /sys/class/scsi_host/host*/nvme_info NVME Initiator Enabled XRI Dist lpfc0 Total 6144 IO 5894 ELS 250 NVME LPORT lpfc0 WWPN x10000090fae0b5f5 WWNN x20000090fae0b5f5 DID x010f00 ONLINE NVME RPORT WWPN x204700a098cbcac6 WWNN x204600a098cbcac6 DID x01050e TARGET DISCSRVC ONLINE NVME Statistics LS: Xmt 000000000e Cmpl 000000000e Abort 00000000 LS XMIT: Err 00000000 CMPL: xb 00000000 Err 00000000 Total FCP Cmpl 00000000000008ea Issue 00000000000008ec OutIO 0000000000000002 abort 00000000 noxri 00000000 nondlp 00000000 qdepth 00000000 wqerr 00000000 err 00000000 FCP CMPL: xb 00000000 Err 00000000#
nvme discover --transport fc \ --traddr nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 \ --host-traddr nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 Discovery Log Number of Records 2, Generation counter 49530 =====Discovery Log Entry 0====== trtype: fc adrfam: fibre-channel subtype: nvme subsystem treq: not specified portid: 0 trsvcid: none subnqn: nqn.1992-08.com.netapp:sn.e18bfca87d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1 traddr: nn-0x204600a098cbcac6:pn-0x204700a098cbcac6将 nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 替换为traddr
。将 nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 替换为host_traddr
。 - 使用
nvme-cli
连接到 NVMe 目标:#
nvme connect --transport fc --traddr nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 --host-traddr nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 -n nqn.1992-08.com.netapp:sn.e18bfca87d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1将 nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 替换为traddr。
将 nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 替换为host_traddr。
将 nqn.1992-08.com.netapp:sn.e18bfca87d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1 替换为subnqn。
- 验证 NVMe 设备当前是否已连接:
#
nvme list Node SN Model Namespace Usage Format FW Rev ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- -------- /dev/nvme0n1 80BgLFM7xMJbAAAAAAAC NetApp ONTAP Controller 1 107.37 GB / 107.37 GB 4 KiB + 0 B FFFFFFFF#
lsblk |grep nvme nvme0n1 259:0 0 100G 0 disk
其他资源
- 如需更多信息,请参阅
nvme
man page 和 NVMe-cli Github 存储库。
29.2.2. 为 QLogic 适配器配置 NVMe initiator
使用这个流程,使用 NVMe 管理命令行界面
(nvme-cli)
工具为 Qlogic 适配器客户端配置 NVMe initiator。
- 安装
nvme-cli
工具:#
yum install nvme-cli这会在/etc/nvme/
目录中创建hostnqn
文件。hostn
文件标识 NVMe 主机。生成一个新的hostnqn
:#
nvme gen-hostnqn - 删除并重新载入
qla2xxx
模块:#
rmmod qla2xxx#
modprobe qla2xxx - 查找本地和远程端口的 WWNN 和 WWPN:
#
dmesg |grep traddr [ 6.139862] qla2xxx [0000:04:00.0]-ffff:0: register_localport: host-traddr=nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 on portID:10700 [ 6.241762] qla2xxx [0000:04:00.0]-2102:0: qla_nvme_register_remote: traddr=nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 PortID:01050d使用这个host-traddr
和traddr
,找到子系统 NQN:#
nvme discover --transport fc --traddr nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 --host-traddr nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 Discovery Log Number of Records 2, Generation counter 49530 =====Discovery Log Entry 0====== trtype: fc adrfam: fibre-channel subtype: nvme subsystem treq: not specified portid: 0 trsvcid: none subnqn: nqn.1992-08.com.netapp:sn.c9ecc9187b1111e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468 traddr: nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6将 nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 替换为traddr。
将 nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 替换为host_traddr。
- 使用
nvme-cli
工具连接到 NVMe 目标:#
nvme connect --transport fc --traddr nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 --host_traddr nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 -n nqn.1992-08.com.netapp:sn.c9ecc9187b1111e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468将 nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 替换为traddr。
将 nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 替换为host_traddr。
将 nqn.1992-08.com.netapp:sn.c9ecc9187b1111e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468 替换为subnqn。
- 验证 NVMe 设备当前是否已连接:
#
nvme list Node SN Model Namespace Usage Format FW Rev ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- -------- /dev/nvme0n1 80BgLFM7xMJbAAAAAAAC NetApp ONTAP Controller 1 107.37 GB / 107.37 GB 4 KiB + 0 B FFFFFFFF#
lsblk |grep nvme nvme0n1 259:0 0 100G 0 disk
其他资源
- 如需更多信息,请参阅
nvme
man page 和 NVMe-cli Github 存储库。