流程

1. 检查您的系统是否包含 device-mapper-multipath 软件包：

   # rpm -q device-mapper-multipath
   device-mapper-multipath-current-package-version

   如果您的系统没有包括这个软件包，它会输出以下内容：

   package device-mapper-multipath is not installed

2. 如果您的系统没有包括这个软件包，请运行以下命令安装它：

   # {PackageManager} install device-mapper-multipath

流程

1. 启用多路径配置文件：

   # mpathconf --enable

2. 如果需要，请编辑 /etc/multipath.conf 文件。DM 多路径的默认设置被编译到系统中，不需要在 /etc/multipath.conf 文件中明确设置。

   path_grouping_policy 的默认值被设置为 failover，因此，您不需要编辑 /etc/multipath.conf 文件。

   配置文件的初始默认部分配置您的系统，以便多路径设备的名称格式为 /dev/mapper/mpathn;。如果没有此设置，则多路径设备的名称将别名化为该设备的 WWID。如果您不想使用用户友好的名称，您可以输入以下命令：

   # mpathconf --enable --user_friendly_names n

   如果您需要在启动 multipath 守护进程后编辑多路径配置文件，则需要执行 systemctl reload multipathd.service 命令以使更改生效。

3. 保存配置文件并退出编辑器。

4. 启动 multipath 守护进程并创建多路径设备：

   # systemctl start multipathd.service

流程

1. 确定哪些磁盘是内部磁盘。在这些示例中，/dev/sda 是内部磁盘：

   • 显示现有的多路径设备：

     # multipath -v2 -l
     
     SIBM-ESXSST336732LC____F3ET0EP0Q000072428BX1 dm-2 WINSYS,SF2372
     size=33 GB features="0" hwhandler="0" wp=rw
     `-+- policy='round-robin 0' prio=0 status=active
       |- 0:0:0:0 sda 8:0 active undef running

   • 显示 DM 多路径可能创建的附加多路径设备：

     # multipath -v2 -d
     
     : SIBM-ESXSST336732LC____F3ET0EP0Q000072428BX1 undef WINSYS,SF2372
     size=33 GB features="0" hwhandler="0" wp=undef
     `-+- policy='round-robin 0' prio=1 status=undef
       |- 0:0:0:0 sda 8:0  undef ready running

2. 编辑 /etc/multipath.conf 文件的 blacklist 部分，使其包含此设备。

   使用它的 WWID 属性识别该设备。虽然您可以使用 devnode 类型识别 sda 设备，但这不是一个安全的步骤，因为重新引导时 /dev/sda 无法保证相同。

   在上例中，/dev/sda 设备的 WWID 是 SIBM-ESXSST336732LC____F3ET0EP0Q000072428BX1。要忽略这个设备，请在 /etc/multipath.conf 文件中包含以下内容：

   blacklist {
         wwid SIBM-ESXSST336732LC____F3ET0EP0Q000072428BX1
   }

3. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

4. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

步骤

1. 检查内核中是否启用了原生 NVMe 多路径：

   # cat /sys/module/nvme_core/parameters/multipath

   这个命令显示以下之一：

   N

   禁用原生 NVMe 多路径。

   Y

   启用原生 NVMe 多路径。

2. 如果禁用原生 NVMe 多路径，使用以下方法之一启用它：

   • 使用内核选项：

     1. 在内核命令行中添加 nvme_core.multipath=Y 选项：

        # grubby --update-kernel=ALL --args="nvme_core.multipath=Y"

     2. 在 64 位 IBM Z 构架中更新引导菜单：

        # zipl

     3. 重启系统。

   • 使用内核模块配置文件：

     1. 使用以下内容创建 /etc/modprobe.d/nvme_core.conf 配置文件：

        options nvme_core multipath=Y

     2. 备份 initramfs 文件系统：

        # cp /boot/initramfs-$(uname -r).img \
             /boot/initramfs-$(uname -r).bak.$(date +%m-%d-%H%M%S).img

     3. 重建 initramfs 文件系统：

        # dracut --force --verbose

     4. 重启系统：

3. 可选： 在运行的系统中，更改 NVMe 设备中的 I/O 策略，以便在所有可用路径中分发 I/O：

   # echo "round-robin" > /sys/class/nvme-subsystem/nvme-subsys0/iopolicy

4. 可选：使用 udev 规则永久设置 I/O 策略。使用以下内容创建 /etc/udev/rules.d/71-nvme-io-policy.rules 文件：

   ACTION=="add|change", SUBSYSTEM=="nvme-subsystem", ATTR{iopolicy}="round-robin"

验证

1. 检查您的系统是否识别 NVMe 设备：

   # nvme list
   
   Node             SN                   Model                                    Namespace Usage                      Format           FW Rev
   ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- --------
   /dev/nvme0n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme0n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2

2. 列出所有连接的 NVMe 子系统：

   # nvme list-subsys
   
   nvme-subsys0 - NQN=testnqn
   \
    +- nvme0 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme1 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme2 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live
    +- nvme3 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live

   检查活动传输类型。例如，nvme0 fc 表示设备通过光纤通道传输连接，nvme tcp 则表示设备通过 TCP 连接。

3. 如果您编辑了内核选项，请检查内核命令行中是否启用了原生 NVMe 多路径：

   # cat /proc/cmdline
   
   BOOT_IMAGE=[...] nvme_core.multipath=Y

4. 检查 DM 多路径报告了 NVMe 命名空间为，例如：nvme0c0c0n1 到 nvme0c3n1，而不是，例如： nvme0n1 到 nvme3n1 ：

   # multipath -e -ll | grep -i nvme
   
   uuid.8ef20f70-f7d3-4f67-8d84-1bb16b2bfe03 [nvme]:nvme0n1 NVMe,Linux,4.18.0-2
   | `- 0:0:1    nvme0c0n1 0:0     n/a   optimized live
   | `- 0:1:1    nvme0c1n1 0:0     n/a   optimized live
   | `- 0:2:1    nvme0c2n1 0:0     n/a   optimized live
     `- 0:3:1    nvme0c3n1 0:0     n/a   optimized live
   
   uuid.44c782b4-4e72-4d9e-bc39-c7be0a409f22 [nvme]:nvme0n2 NVMe,Linux,4.18.0-2
   | `- 0:0:1    nvme0c0n1 0:0     n/a   optimized live
   | `- 0:1:1    nvme0c1n1 0:0     n/a   optimized live
   | `- 0:2:1    nvme0c2n1 0:0     n/a   optimized live
     `- 0:3:1    nvme0c3n1 0:0     n/a   optimized live

5. 如果您更改了 I/O 策略，请检查 round-robin 是 NVMe 设备中的活跃 I/O 策略：

   # cat /sys/class/nvme-subsystem/nvme-subsys0/iopolicy
   
   round-robin

步骤

1. 检查是否禁用了原生 NVMe 多路径：

   # cat /sys/module/nvme_core/parameters/multipath

   这个命令显示以下之一：

   N

   禁用原生 NVMe 多路径。

   Y

   启用原生 NVMe 多路径。

2. 如果启用了原生 NVMe 多路径，请禁用它：

   1. 在内核命令行中删除 nvme_core.multipath=Y 选项：

      # grubby --update-kernel=ALL --remove-args="nvme_core.multipath=Y"

   2. 在 64 位 IBM Z 构架中更新引导菜单：

      # zipl

   3. 如果存在，从 /etc/modprobe.d/nvme_core.conf 文件中删除 options nvme_core multipath=Y 行。
   4. 重启系统。

3. 确保启用了 DM 多路径：

   # systemctl enable --now multipathd.service

4. 在所有可用路径中分发 I/O。在 /etc/multipath.conf 文件中添加以下内容：

   device {
     vendor "NVME"
     product ".*"
     path_grouping_policy    group_by_prio
   }

   注意

   当 DM 多路径管理 NVMe 设备时，/sys/class/nvme-subsys0/iopolicy 配置文件不会影响 I/O 分发。

5. 重新载入 multipathd 服务以应用配置更改：

   # multipath -r

6. 备份 initramfs 文件系统：

   # cp /boot/initramfs-$(uname -r).img \
        /boot/initramfs-$(uname -r).bak.$(date +%m-%d-%H%M%S).img

7. 重建 initramfs 文件系统：

   # dracut --force --verbose

验证

1. 检查您的系统是否识别 NVMe 设备：

   # nvme list
   
   Node             SN                   Model                                    Namespace Usage                      Format           FW Rev
   ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- --------
   /dev/nvme0n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme0n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme1n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme1n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme2n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme2n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme3n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme3n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2

2. 列出所有连接的 NVMe 子系统。检查命令报告为 nvme0n1 到 nvme3n2，而不是，例如： nvme0c0c0n1 到 nvme0c3n1 ：

   # nvme list-subsys
   
   nvme-subsys0 - NQN=testnqn
   \
    +- nvme0 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme1 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme2 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live
    +- nvme3 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live

   # multipath -ll
   
   mpathae (uuid.8ef20f70-f7d3-4f67-8d84-1bb16b2bfe03) dm-36 NVME,Linux
   size=233G features='1 queue_if_no_path' hwhandler='0' wp=rw
   `-+- policy='service-time 0' prio=50 status=active
     |- 0:1:1:1  nvme0n1 259:0   active ready running
     |- 1:2:1:1  nvme1n1 259:2   active ready running
     |- 2:3:1:1  nvme2n1 259:4   active ready running
     `- 3:4:1:1  nvme3n1 259:6   active ready running
   
   mpathaf (uuid.44c782b4-4e72-4d9e-bc39-c7be0a409f22) dm-39 NVME,Linux
   size=233G features='1 queue_if_no_path' hwhandler='0' wp=rw
   `-+- policy='service-time 0' prio=50 status=active
     |- 0:1:2:2  nvme0n2 259:1   active ready running
     |- 1:2:2:2  nvme1n2 259:3   active ready running
     |- 2:3:2:2  nvme2n2 259:5   active ready running
     `- 3:4:2:2  nvme3n2 259:7   active ready running

1. multipaths 部分
2. overrides 部分
3. devices 部分
4. defaults 部分

流程

1. 查看 /etc/multipath.conf 配置文件，其中包含配置默认值模板：

   #defaults {
   #       polling_interval        10
   #       path_selector           "round-robin 0"
   #       path_grouping_policy    multibus
   #       uid_attribute           ID_SERIAL
   #       prio                    alua
   #       path_checker            readsector0
   #       rr_min_io               100
   #       max_fds                 8192
   #       rr_weight               priorities
   #       failback                immediate
   #       no_path_retry           fail
   #       user_friendly_names     yes
   #}

2. 覆盖任何配置参数的默认值。您可以从此模板将相关行复制到 defaults 部分，并取消注释它。

   例如，要将 path_grouping_policy 参数覆盖为 multibus，而不是默认值 failover，请将模板中的相应行复制到配置文件的初始默认值部分，然后取消对它的注释，如下所示：

   defaults {
           user_friendly_names     yes
           path_grouping_policy    multibus
   }

3. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

4. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 修改特定多路径设备的 multipaths 部分。以下示例显示了在配置文件中为两个特定多路径设备指定的多路径属性：

   • 第一个设备的 WWID 为 3600508b4000156d70001200000b0000，符号链接名为 yellow。
   • 示例中的第二个多路径设备的 WWID 为 1DEC_321816758474，符号链接名为 red。

   在本例中，rr_weight 属性设置为 priorities。

   multipaths {
          multipath {
                 wwid                  3600508b4000156d70001200000b0000
                 alias                 yellow
                 path_grouping_policy  multibus
                 path_selector         "round-robin 0"
                 failback              manual
                 rr_weight             priorities
                 no_path_retry         5
          }
          multipath {
                 wwid                  1DEC_321816758474
                 alias                 red
                 rr_weight             priorities
           }
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 运行以下命令查看具体路径协议：

   # multipathd show paths format "%d %P"
   dev protocol
   sda scsi:ata
   sdb scsi:fcp
   sdc scsi:fcp

2. 通过为每个多路径类型添加 protocol 子部分，编辑 /etc/multipath.conf 文件的 overrides 部分。

   • 路径设备的设置，使用 scsi:fcp 协议：

     overrides {
             dev_loss_tmo 60
             fast_io_fail_tmo 8
             protocol {
                     type "scsi:fcp"
                     dev_loss_tmo 70
                     fast_io_fail_tmo 10
                     eh_deadline 360
             }

   • 使用 scsi:iscsi 协议的路径设备设置：

     overrides {
             dev_loss_tmo 60
             fast_io_fail_tmo 8
             protocol {
                     type "scsi:iscsi"
                     dev_loss_tmo 60
                     fast_io_fail_tmo 120
             }

   • 路径设备的设置，使用所有其他协议：

     overrides {
             dev_loss_tmo 60
             fast_io_fail_tmo 8
             protocol {
                     type "<type of protocol>"
                     dev_loss_tmo 60
                     fast_io_fail_tmo 8
             }

流程

1. 查看默认配置值的信息，包括支持的设备：

   # multipathd show config
   # multipath -t

   在多路径配置中，默认包括支持多路径的许多设备。

2. 可选：如果需要修改默认配置值，您可以通过在配置文件中包含覆盖这些值的设备的条目来覆盖默认值。您可以复制 multipathd show config 命令显示的设备的设备配置默认值，并覆盖您要更改的值。

3. 通过设置 vendor 和 product 参数，将没有被默认自动配置的设备添加到配置文件的 devices 部分。打开 /sys/block/device_name/device/vendor 和 /sys/block/device_name/device/model 文件，其中 device_name 是多路径的设备，如下例所示：

   # cat /sys/block/sda/device/vendor
   WINSYS
   # cat /sys/block/sda/device/model
   SF2372

4. 可选： 根据您的具体设备指定附加参数：

   主动/主动 设备

   通常，在这种情况下不需要设置附加参数。如果需要，您可以将 path_grouping_policy 设置为 multibus。其他可能需要设置的参数为 no_path_retry 和 rr_min_io。

   主动/被动 设备

   如果它自动将 I/O 的路径切换到被动路径，您需要将检查程序功能更改为不会将 I/O 发送到路径路径，以测试其是否工作，否则您的设备会保持故障。这意味着，您已将 path_checker 设置为 tur，它适用于支持 Test unit Ready 命令的所有 SCSI 设备。

   如果设备需要特殊命令来切换路径，则为多路径配置这个设备需要硬件处理器内核模块。当前可用的硬件处理器是 emc。如果您的设备不够，您可能无法为多路径配置设备。

   以下示例显示了多路径配置文件中的 device 条目：

   #	}
   #	device {
   #		vendor			"COMPAQ  "
   #		product			"MSA1000         "
   #		path_grouping_policy	multibus
   #		path_checker		tur
   #		rr_weight		priorities
   #	}
   #}

5. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

6. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 覆盖特定于设备的设置。例如，您可能希望所有设备都将 no_path_retry 设置为 fail。当所有路径都失败时，使用以下命令关闭队列。这会覆盖任何特定于设备的设置。

   overrides {
           no_path_retry fail
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

1. 属性
2. devnode
3. device
4. protocol
5. wwid

流程

1. 使用 wwid 条目禁用 /etc/multipath.conf 配置文件中的设备。

   以下示例显示，DM 多路径配置文件中禁用 WWID 为 26353900f02796769 的设备的行：

   blacklist {
          wwid 26353900f02796769
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 使用 devnode 条目禁用 /etc/multipath.conf 配置文件中的设备。

   下面的例子显示，DM 多路径配置文件中禁用所有 SCSI 设备的行，因为它也禁用所有 sd* 设备：

   blacklist {
          devnode "^sd[a-z]"
   }

   您可以使用 devnode 条目禁用单个设备，而不是禁用特定类型的所有设备。但不建议这样做，因为除非由 udev 规则静态映射，否则无法保证重启后特定设备的名称相同。例如：重启后，设备名称可以从 /dev/sda 改为 /dev/sdb。

   默认情况下，DM 多路径会禁用所有不是 SCSI、NVMe 或者 DASD 的设备，使用以下 devnode 条目：

   blacklist {
          devnode "!^(sd[a-z]|dasd[a-z]|nvme[0-9])"
   }

   这个条目禁用的设备通常不支持 DM 多路径。

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 使用 device 部分，禁用 /etc/multipath.conf 配置文件中的设备。

   以下示例禁用所有 IBM DS4200 和 HP 设备的多路径：

   blacklist {
          device {
                  vendor  "IBM"
                  product "3S42"       #DS4200 Product 10
          }
          device {
                  vendor  "HP"
                  product ".*"
          }
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 使用 property 参数禁用 /etc/multipath.conf 配置文件中的设备。此参数是一个正则表达式字符串，与设备的 udev 环境变量名称匹配。

   以下示例禁用了所有使用 udev 属性 ID_ATA 的设备上的多路径：

   blacklist {
           property "ID_ATA"
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 可选：查看路径使用的协议：

   # multipathd show paths format "%d %P"

2. 使用 protocol 参数禁用 /etc/multipath.conf 配置文件中的设备。

   protocol 参数使用正则表达式，将具有匹配协议字符串的所有设备列入黑名单。例如，要在所有 nvme 设备中禁用多路径，请使用：

   blacklist {
           protocol "nvme"
   }

   DM 多路径识别以下协议字符串：

   • scsi:fcp
   • scsi:spi
   • scsi:ssa
   • scsi:sbp
   • scsi:srp
   • scsi:iscsi
   • scsi:sas
   • scsi:adt
   • scsi:ata
   • scsi:unspec
   • ccw
   • cciss
   • nvme:pcie
   • nvme:rdma
   • nvme:fc
   • nvme:tcp
   • nvme:loop
   • nvme:apple-nvme
   • nvme:unspec
   • undef

3. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

4. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 使用 /etc/multipath.conf 配置文件的 blacklist_exceptions 部分在设备上启用多路径。

   当在配置文件的 blacklist_exceptions 部分中指定设备时，您必须使用与 黑名单 部分中指定的相同标准指定例外。例如： WWID 异常不适用于 devnode 条目禁用的设备，即使禁用的设备与该 WWID 关联。同样，devnode 例外仅适用于 devnode 条目，device 例外则仅适用于设备条目。

   例 6.1. WWID 异常

   如果您有大量设备，且希望仅多路径 WWID 为 3600d0230000000000e13955cc3757803，而不是逐一禁用每个设备，您可以禁用所有这些设备，然后禁用所有这些设备，然后通过将以下几行添加到 /etc/multipath.conf 文件中来只启用其中一个。

   blacklist {
           wwid ".*"
   }
   
   blacklist_exceptions {
           wwid "3600d0230000000000e13955cc3757803"
   }

   另外，您可以使用感叹号(!)来反转 黑名单 条目，该条目会禁用除指定 WWID 之外的所有设备：

   blacklist {
           wwid "!3600d0230000000000e13955cc3757803"
   }

   例 6.2. udev 属性的例外

   property 参数的工作方式与其他 blacklist_exception 参数不同。property 参数的值必须与 udev 数据库中变量名称匹配。否则，设备会被禁用。使用这个参数，您可以在某些 SCSI 设备中禁用多路径，如 USB 盘和本地硬盘。

   要只在可能进行多路径的 SCSI 设备中启用多路径，请将此参数设置为 (SCSI_IDENT_|ID_WWN)，如下例所示：

   blacklist_exceptions {
           property "(SCSI_IDENT_|ID_WWN)"
   }

2. 通过运行以下命令之一修改多路径配置文件后，验证 /etc/multipath.conf 文件：

   • 要显示任何配置错误，请运行：

     # multipath -t > /dev/null

   • 要显示使用添加的更改显示新配置，请运行：

     # multipath -t

3. 重新载入 /etc/multipath.conf 文件并重新配置 multipathd 守护进程以使更改生效：

   # service multipathd reload

流程

1. 重新定义您的物理设备大小。

2. 执行以下命令查找逻辑单元号(LUN)的路径：

   # multipath -l

3. 重新定义您的路径大小。对于 SCSI 设备，在 rescan 文件中写入 1 以便重新扫描 SCSI 驱动程序，如下命令所示：

   # echo 1 > /sys/block/path_device/device/rescan

   请确定您为每个路径设备运行这个命令。例如：如果您的路径设备是 sda、sdb、sde 和 sdf，则您要运行以下命令：

   # echo 1 > /sys/block/sda/device/rescan
   # echo 1 > /sys/block/sdb/device/rescan
   # echo 1 > /sys/block/sde/device/rescan
   # echo 1 > /sys/block/sdf/device/rescan

4. 重新定义多路径设备大小：

   # multipathd resize map multipath_device

5. 重新定义文件系统大小（假设没有使用 LVM 或者 DOS 分区）：

   # resize2fs /dev/mapper/mpatha

流程

1. 创建 /etc/multipath.conf 配置文件，加载 multipath 模块并启用 multipathd systemd 服务：

   # yum install device-mapper-multipath

2. 执行以下命令，以创建 /etc/multipath.conf 配置文件，载入 multipath 模块，并将 multipathd 的 chkconfig 设置为 on:

   # mpathconf --enable

3. 如果 find_multipaths 配置参数未设置为 yes，请编辑 /etc/multipath.conf 文件的 blacklist 和 blacklist_exceptions 部分，如防止设备使用多路径所述。

4. 要让多路径在发现 root 设备后马上构建多路径设备，请输入以下命令。此命令还可确保 find_multipaths 允许设备，即使它只有一个路径。

   # multipath -a root_devname

   例如，如果 root 设备是 /dev/sdb，请输入以下命令。

   # multipath -a /dev/sdb
   wwid '3600d02300069c9ce09d41c4ac9c53200' added

5. 执行 multipath 命令并搜索以下格式行的输出，确认您的配置文件设置是否正确。这表示该命令创建多路径设备失败。

   date  wwid: ignoring map

   例如：如果设备的 WWID 是 3600d02300069c9ce09d41c4ac9c53200，您将在输出中看到一行，如下所示：

   # multipath
   Oct 21 09:37:19 | 3600d02300069c9ce09d41c4ac9c53200: ignoring map

6. 使用 multipath 重建 initramfs 文件系统：

   # dracut --force -H --add multipath

7. 关闭机器。
8. 引导机器。
9. 使其他路径对机器可见。

流程

1. 将设备的 WWID 添加到 /etc/multipath/wwids 文件中：

   # multipath -a swap_devname

   例如，如果 root 设备是 /dev/sdb，请输入以下命令。

   # multipath -a /dev/sdb
   wwid '3600d02300069c9ce09d41c4ac9c53200' added

2. 执行 multipath 命令并搜索以下格式行的输出，确认您的配置文件设置是否正确：

   date  wwid: ignoring map

   这表示该命令创建多路径设备失败。

   例如：如果设备的 WWID 是 3600d02300069c9ce09d41c4ac9c53200，您将在输出中看到一行，如下所示：

   # multipath
   Oct 21 09:37:19 | 3600d02300069c9ce09d41c4ac9c53200: ignoring map

3. 在 /etc/multipath.conf 文件中为交换设备设置别名：

   multipaths {
       multipath {
           wwid WWID_of_swap_device
           alias swapdev
       }
   }

4. 编辑 /etc/fstab 文件，并使用多路径设备替换到 root 设备的旧设备路径。

   例如，如果您在 /etc/fstab 文件中有以下条目：

   /dev/sdb2 swap                    swap    defaults        0 0

   将条目改为以下内容：

   /dev/mapper/swapdev swap          swap    defaults        0 0

5. 使用多路径重建 initramfs 文件系统：

   # dracut --force -H --add multipath

6. 关闭机器。
7. 引导机器。
8. 使其他路径对机器可见。

流程

1. 使用 umount 命令卸载该设备上挂载的任何文件系统。

2. 从任何 MD RAID 阵列或者它所属的 LVM 卷中删除该设备。根据设备类型，执行以下步骤之一：

   • 如果该设备是 LVM 组的成员，且它是一个多路径设备：

     1. 将数据移动到另一个设备中：

        # pvmove -b /dev/mapper/from-multipath-device /dev/mapper/to-multipath-device

     2. 从卷组中删除该设备：

        # vgreduce volume-group /dev/mapper/from-multipath-device

     3. 可选：从物理设备中删除 LVM 元数据：

        # pvremove /dev/mapper/from-multipath-device

   • 如果您要删除多路径设备，请执行以下命令：

     1. 查看该设备的所有路径：

        # multipath -l

        稍后需要这个命令的输出。

     2. 清除 I/O 并删除多路径设备：

        # multipath -f multipath-device

   • 如果该设备没有配置为多路径设备，或者设备配置为多路径设备，并且您之前将 I/O 传递给单个路径，请将任何未完成的 I/O 刷新到所有使用的设备路径：

     # blockdev --flushbufs device

     对于直接访问的设备非常重要，umount 或 vgreduce 命令不会清除 I/O。

   • 如果您要删除 SCSI 设备，请执行以下命令：

     1. 删除对基于路径的设备名称的任何引用，如 /dev/sd、/dev/disk/by-path 或 major:minor number（在系统上的应用程序、脚本或工具中）。这样可保证以后添加的不同设备不会为当前的设备错误。

     2. 从 SCSI 子系统中删除该设备的每个路径：

        # echo 1 > /sys/block/device-name/device/delete

        其中 device-name 从 multipath -l 命令的输出中检索（如果之前用作多路径设备）。

3. 从正在运行的系统中删除物理设备。请注意，当您删除此设备时，I/O 到其它设备不会停止。