절차

1. targetcli 툴을 설치합니다.

   # dnf install targetcli

2. 대상 서비스를 시작합니다.

   # systemctl start target

3. 부팅 시 시작할 대상을 설정합니다.

   # systemctl enable target

4. 방화벽에서 포트 3260 을 열고 방화벽 구성을 다시 로드합니다.

   # firewall-cmd --permanent --add-port=3260/tcp
   Success
   
   # firewall-cmd --reload
   Success

절차

1. iSCSI 디렉토리로 이동합니다.

   /> iscsi/

   참고

   cd 명령은 디렉터리를 변경하고 로 이동할 경로를 나열하는 데 사용됩니다.

2. 다음 옵션 중 하나를 사용하여 iSCSI 대상을 생성합니다.

   1. 기본 대상 이름을 사용하여 iSCSI 대상 생성:

      /iscsi> create
      
      Created target
      iqn.2003-01.org.linux-iscsi.hostname.x8664:sn.78b473f296ff
      Created TPG1

   2. 특정 이름을 사용하여 iSCSI 대상 생성:

      /iscsi> create iqn.2006-04.com.example:444
      
      Created target iqn.2006-04.com.example:444
      Created TPG1
      Here iqn.2006-04.com.example:444 is target_iqn_name

      iqn.2006-04.com.example:444 를 특정 대상 이름으로 바꿉니다.

3. 새로 생성된 대상을 확인합니다.

   /iscsi> ls
   
   o- iscsi.......................................[1 Target]
       o- iqn.2006-04.com.example:444................[1 TPG]
           o- tpg1...........................[enabled, auth]
              o- acls...............................[0 ACL]
               o- luns...............................[0 LUN]
              o- portals.........................[0 Portal]

절차

1. backstores/ 디렉토리에서 fileio/ 로 이동합니다.

   /> backstores/fileio

2. fileio 스토리지 오브젝트를 생성합니다.

   /backstores/fileio> create file1 /tmp/disk1.img 200M write_back=false
   
   Created fileio file1 with size 209715200

절차

1. backstores/ 디렉터리에서 block/ 로 이동합니다.

   /> backstores/block/

2. 블록 보조 저장소를 생성합니다.

   /backstores/block> create name=block_backend dev=/dev/sdb
   
   Generating a wwn serial.
   Created block storage object block_backend using /dev/vdb.

절차

1. backstores/ 디렉터리에서 pscsi/ 로 이동합니다.

   /> backstores/pscsi/

2. 이 예에서는 /dev/sr0 을 사용하여 TYPE_ROM 장치의 pscsi 백 저장소를 생성합니다.

   /backstores/pscsi> create name=pscsi_backend dev=/dev/sr0
   
   Generating a wwn serial.
   Created pscsi storage object pscsi_backend using /dev/sr0

절차

1. backstores/ 디렉토리에서 ramdisk/ 로 이동합니다.

   /> backstores/ramdisk/

2. 1GB RAM 디스크 보조 저장소를 생성합니다.

   /backstores/ramdisk> create name=rd_backend size=1GB
   
   Generating a wwn serial.
   Created rd_mcp ramdisk rd_backend with size 1GB.

절차

1. TPG 디렉토리로 이동합니다.

   /iscsi> iqn.2006-04.example:444/tpg1/

2. 다음 옵션 중 하나를 사용하여 iSCSI 포털을 생성합니다.

   1. 기본 포털을 생성하면 기본 iSCSI 포트 3260 을 사용하며 타겟에서 해당 포트의 모든 IP 주소를 수신 대기할 수 있습니다.

      /iscsi/iqn.20...mple:444/tpg1> portals/ create
      
      Using default IP port 3260
      Binding to INADDR_Any (0.0.0.0)
      Created network portal 0.0.0.0:3260

      참고

      iSCSI 대상이 생성되면 기본 포털도 생성됩니다. 이 포털은 기본 포트 번호인 모든 IP 주소를 수신 대기하도록 설정되어 있습니다. 0.0.0.0:3260.

      기본 포털을 제거하려면 다음 명령을 사용합니다.

      /iscsi/iqn-name/tpg1/portals delete ip_address=0.0.0.0 ip_port=3260

   2. 특정 IP 주소를 사용하여 포털 생성:

      /iscsi/iqn.20...mple:444/tpg1> portals/ create 192.168.122.137
      
      Using default IP port 3260
      Created network portal 192.168.122.137:3260

절차

1. 이미 생성된 스토리지 오브젝트의 LUN을 만듭니다.

   /iscsi/iqn.20...mple:444/tpg1> luns/ create /backstores/ramdisk/rd_backend
   Created LUN 0.
   
   /iscsi/iqn.20...mple:444/tpg1> luns/ create /backstores/block/block_backend
   Created LUN 1.
   
   /iscsi/iqn.20...mple:444/tpg1> luns/ create /backstores/fileio/file1
   Created LUN 2.

2. 생성된 LUN을 확인합니다.

   /iscsi/iqn.20...mple:444/tpg1> ls
   
   o- tpg.................................. [enambled, auth]
       o- acls ......................................[0 ACL]
       o- luns .....................................[3 LUNs]
       |  o- lun0.........................[ramdisk/ramdisk1]
       |  o- lun1.................[block/block1 (/dev/vdb1)]
       |  o- lun2...................[fileio/file1 (/foo.img)]
       o- portals ................................[1 Portal]
           o- 192.168.122.137:3260......................[OK]

   기본 LUN 이름은 0 부터 시작됩니다.

   중요

   기본적으로 LUN은 읽기-쓰기 권한으로 생성됩니다. ACL이 생성된 후 새 LUN이 추가되면 LUN은 사용 가능한 모든 ACL에 자동으로 매핑되며 보안 위험이 발생할 수 있습니다. 읽기 전용 권한으로 LUN을 만들려면 읽기 전용 iSCSI LUN 만들기 를 참조하십시오.

3. ACL 구성. 자세한 내용은 iSCSI ACL 생성을 참조하십시오.

절차

1. 읽기 전용 권한을 설정합니다.

   /> set global auto_add_mapped_luns=false
   
   Parameter auto_add_mapped_luns is now 'false'.

   이렇게 하면 LUN을 수동으로 매핑할 수 있도록 하는 기존 ACL과 LUN의 자동 매핑이 금지됩니다.

2. initiator_iqn_name 디렉터리로 이동합니다.

   /> iscsi/target_iqn_name/tpg1/acls/initiator_iqn_name/

3. LUN을 생성합니다.

   /iscsi/target_iqn_name/tpg1/acls/initiator_iqn_name> create mapped_lun=next_sequential_LUN_number tpg_lun_or_backstore=backstore write_protect=1

   예제:

   /iscsi/target_iqn_name/tpg1/acls/2006-04.com.example.foo:888> create mapped_lun=1 tpg_lun_or_backstore=/backstores/block/block2 write_protect=1
   
   Created LUN 1.
   Created Mapped LUN 1.

4. 생성된 LUN을 확인합니다.

   /iscsi/target_iqn_name/tpg1/acls/2006-04.com.example.foo:888> ls
    o- 2006-04.com.example.foo:888 .. [Mapped LUNs: 2]
    | o- mapped_lun0 .............. [lun0 block/disk1 (rw)]
    | o- mapped_lun1 .............. [lun1 block/disk2 (ro)]

   이제 mapped_lun1 행의 끝에 (rw)가 읽기 전용임을 나타내는 mapped_lun0의 (rw)가 있습니다.

5. ACL 구성. 자세한 내용은 iSCSI ACL 생성을 참조하십시오.

절차

1. acls 디렉토리로 이동합니다.

   /iscsi/iqn.20...mple:444/tpg1> acls/

2. 다음 옵션 중 하나를 사용하여 ACL을 만듭니다.

   1. 이니시에이터의 /etc/iscsi/initiatorname.iscsi 파일에서 이니시에이터 이름 사용.

   2. 쉽게 이해할 수 있는 이름을 사용하는 경우, ACL이 이니시에이터와 일치하는지 확인하는 iSCSI 이니시에이터 생성 섹션을 참조하십시오.

      /iscsi/iqn.20...444/tpg1/acls> create iqn.2006-04.com.example.foo:888
      
      Created Node ACL for iqn.2006-04.com.example.foo:888
      Created mapped LUN 2.
      Created mapped LUN 1.
      Created mapped LUN 0.

      참고

      앞의 예제에서 사용되는 글로벌 설정 auto_add_mapped_luns 는 생성된 모든 ACL에 LUN을 자동으로 매핑합니다.

      대상 서버의 TPG 노드 내에 사용자 생성 ACL을 설정할 수 있습니다.

      /iscsi/iqn.20...scsi:444/tpg1> set attribute generate_node_acls=1

절차

1. 속성 인증 설정:

   /iscsi/iqn.20...mple:444/tpg1> set attribute authentication=1
   
   Parameter authentication is now '1'.

2. userid 및 암호 설정 :

   /tpg1> set auth userid=redhat
   Parameter userid is now 'redhat'.
   
   /iscsi/iqn.20...689dcbb3/tpg1> set auth password=redhat_passwd
   Parameter password is now 'redhat_passwd'.

절차

1. 대상에서 로그아웃합니다.

   # iscsiadm -m node -T iqn.2006-04.example:444 -u

   대상에 로그인하는 방법에 대한 자세한 내용은 iSCSI 이니시에이터 생성을 참조하십시오.

2. 모든 ACL, LUN 및 포털을 포함한 전체 대상을 제거합니다.

   /> iscsi/ delete iqn.2006-04.com.example:444

   iqn.2006-04.com.example:444 를 target_iqn_name으로 바꿉니다.

   • iSCSI 보조 저장소를 제거하려면 다음을 수행합니다.

     /> backstores/backstore-type/ delete block_backend

     • backstore-type 을 fileio,block,pscsi 또는 ramdisk 로 바꿉니다.
     • block_backend 를 삭제하려는 보조 저장소 이름으로 교체합니다.

   • ACL과 같은 iSCSI 대상의 일부를 제거하려면 다음을 수행합니다.

     /> /iscsi/iqn-name/tpg/acls/ delete iqn.2006-04.com.example:444

절차

1. 클라이언트 시스템에 iscsi-initiator-utils 를 설치합니다.

   # dnf install iscsi-initiator-utils

2. 이니시에이터 이름을 확인합니다.

   # cat /etc/iscsi/initiatorname.iscsi
   
   InitiatorName=2006-04.com.example.foo:888

3. ACL에 iSCSI ACL 생성에 사용자 지정 이름이 지정된 경우 그에 따라 /etc/iscsi/initiatorname.iscsi 파일을 수정합니다.

   # vi /etc/iscsi/initiatorname.iscsi

4. 대상을 검색하고 표시된 대상 IQN을 사용하여 타겟에 로그인합니다.

   # iscsiadm -m discovery -t st -p 10.64.24.179
       10.64.24.179:3260,1 iqn.2006-04.example:444
   
   # iscsiadm -m node -T iqn.2006-04.example:444 -l
       Logging in to [iface: default, target: iqn.2006-04.example:444, portal: 10.64.24.179,3260] (multiple)
       Login to [iface: default, target: iqn.2006-04.example:444, portal: 10.64.24.179,3260] successful.

   10.64.24.179 를 target-ip-address로 바꿉니다.

   iSCSI ACL 생성에 설명된 대로 해당 이니시에이터 이름이 ACL에 추가되는 경우 동일한 대상에 연결된 수의 이니시에이터에 이 절차를 사용할 수 있습니다.

5. iSCSI 디스크 이름을 찾아서 이 iSCSI 디스크에 파일 시스템을 생성합니다.

   # grep "Attached SCSI" /var/log/messages
   
   # mkfs.ext4 /dev/disk_name

   disk_name 을 /var/log/messages 파일에 표시된 iSCSI 디스크 이름으로 바꿉니다.

6. 파일 시스템을 마운트합니다.

   # mkdir /mount/point
   
   # mount /dev/disk_name /mount/point

   /mount/point 를 파티션의 마운트 지점으로 바꿉니다.

7. 시스템이 부팅될 때 /etc/fstab 파일을 편집하여 파일 시스템을 자동으로 마운트합니다.

   # vi /etc/fstab
   
   /dev/disk_name /mount/point ext4 _netdev 0 0

   disk_name 을 iSCSI 디스크 이름으로 바꾸고 /mount/point 를 파티션의 마운트 지점으로 바꿉니다.

절차

1. iscsid.conf 파일에서 CHAP 인증을 활성화합니다.

   # vi /etc/iscsi/iscsid.conf
   
   node.session.auth.authmethod = CHAP

   기본적으로 node.session.auth.authmethod 는 None으로 설정됩니다.

2. iscsid.conf 파일에 대상 사용자 이름 및 암호를 추가합니다.

   node.session.auth.username = redhat
   node.session.auth.password = redhat_passwd

3. iscsid 데몬을 시작합니다.

   # systemctl start iscsid.service

절차

1. 클라이언트 시스템에 iscsi-initiator-utils 를 설치합니다.

   # dnf install iscsi-initiator-utils

2. 실행 중인 세션에 대한 정보를 찾습니다.

   # iscsiadm -m session -P 3

   이 명령은 세션 또는 장치 상태, 세션 ID(sid), 일부 협상 매개 변수 및 세션을 통해 액세스할 수 있는 SCSI 장치를 표시합니다.

   • 예를 들어 sid -to-node 매핑만 표시하려면 더 짧은 출력을 보려면 다음을 실행합니다.

     # iscsiadm -m session -P 0
             or
     # iscsiadm -m session
     
     tcp [2] 10.15.84.19:3260,2 iqn.1992-08.com.netapp:sn.33615311
     tcp [3] 10.15.85.19:3260,3 iqn.1992-08.com.netapp:sn.33615311

     이러한 명령은 실행 중인 세션 목록을 다음 형식으로 출력합니다. driver [sid] target_ip:port,target_group_tag proper_target_target_name.

절차

1. 다중 경로 논리적 장치의 경로를 결정합니다.

   multipath -ll

2. 다중 경로를 사용하는 시스템에서 파이버 채널 논리 단위를 다시 스캔합니다.

   $ echo 1 > /sys/block/sdX/device/rescan

절차

1. nvmet-rdma 하위 시스템을 생성합니다.

   # modprobe nvmet-rdma
   
   # mkdir /sys/kernel/config/nvmet/subsystems/testnqn
   
   # cd /sys/kernel/config/nvmet/subsystems/testnqn

   testnqn 을 하위 시스템 이름으로 교체합니다.

2. 모든 호스트가 이 대상에 연결하도록 허용합니다.

   # echo 1 > attr_allow_any_host

3. 네임스페이스를 구성합니다.

   # mkdir namespaces/10
   
   # cd namespaces/10

   10 을 네임 스페이스 번호로 바꿉니다.

4. NVMe 장치의 경로를 설정합니다.

   # echo -n /dev/nvme0n1 > device_path

5. 네임스페이스를 활성화합니다.

   # echo 1 > enable

6. NVMe 포트를 사용하여 디렉터리를 생성합니다.

   # mkdir /sys/kernel/config/nvmet/ports/1
   
   # cd /sys/kernel/config/nvmet/ports/1

7. mlx5_ib0 의 IP 주소 표시 :

   # ip addr show mlx5_ib0
   
   8: mlx5_ib0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 4092 qdisc mq state UP group default qlen 256
       link/infiniband 00:00:06:2f:fe:80:00:00:00:00:00:00:e4:1d:2d:03:00:e7:0f:f6 brd 00:ff:ff:ff:ff:12:40:1b:ff:ff:00:00:00:00:00:00:ff:ff:ff:ff
       inet 172.31.0.202/24 brd 172.31.0.255 scope global noprefixroute mlx5_ib0
          valid_lft forever preferred_lft forever
       inet6 fe80::e61d:2d03:e7:ff6/64 scope link noprefixroute
          valid_lft forever preferred_lft forever

8. 대상의 전송 주소를 설정합니다.

   # echo -n 172.31.0.202 > addr_traddr

9. RDMA를 전송 유형으로 설정합니다.

   # echo rdma > addr_trtype
   
   # echo 4420 > addr_trsvcid

10. 포트의 주소 제품군을 설정합니다.

    # echo ipv4 > addr_adrfam

11. 소프트 링크를 생성합니다.

    # ln -s /sys/kernel/config/nvmet/subsystems/testnqn   /sys/kernel/config/nvmet/ports/1/subsystems/testnqn

절차

1. nvmetcli 패키지를 설치합니다.

   # dnf install nvmetcli

2. rdma.json 파일을 다운로드합니다.

   # wget http://git.infradead.org/users/hch/nvmetcli.git/blob_plain/0a6b088db2dc2e5de11e6f23f1e890e4b54fee64:/rdma.json

3. rdma.json 파일을 편집하고 traddr 값을 172.31.0.202 로 변경합니다.

4. NVMe 대상 구성 파일을 로드하여 대상을 설정합니다.

   # nvmetcli restore rdma.json

절차

1. nvme-cli 툴을 설치합니다.

   # dnf install nvme-cli

2. 로드되지 않은 경우 nvme-rdma 모듈을 로드합니다.

   # modprobe nvme-rdma

3. NVMe 대상에서 사용 가능한 하위 시스템을 검색합니다.

   # nvme discover -t rdma -a 172.31.0.202 -s 4420
   
   Discovery Log Number of Records 1, Generation counter 2
   =====Discovery Log Entry 0======
   trtype:  rdma
   adrfam:  ipv4
   subtype: nvme subsystem
   treq:    not specified, sq flow control disable supported
   portid:  1
   trsvcid: 4420
   subnqn:  testnqn
   traddr:  172.31.0.202
   rdma_prtype: not specified
   rdma_qptype: connected
   rdma_cms:    rdma-cm
   rdma_pkey: 0x0000

4. 검색된 하위 시스템에 연결합니다.

   # nvme connect -t rdma -n testnqn -a 172.31.0.202 -s 4420
   
   # lsblk
   NAME                         MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
   sda                            8:0    0 465.8G  0 disk
   ├─sda1                         8:1    0     1G  0 part /boot
   └─sda2                         8:2    0 464.8G  0 part
     ├─rhel_rdma--virt--03-root 253:0    0    50G  0 lvm  /
     ├─rhel_rdma--virt--03-swap 253:1    0     4G  0 lvm  [SWAP]
     └─rhel_rdma--virt--03-home 253:2    0 410.8G  0 lvm  /home
   nvme0n1
   
   # cat /sys/class/nvme/nvme0/transport
   rdma

   testnqn 을 NVMe 하위 시스템 이름으로 교체합니다.

   172.31.0.202 를 대상 IP 주소로 바꿉니다.

   4420 을 포트 번호로 바꿉니다.

절차

1. nvme-cli 툴을 설치합니다.

   # dnf install nvme-cli

   그러면 /etc/ nvme/ 디렉터리에 hostn qn 파일이 생성됩니다. hostnqn 파일은 NVMe 호스트를 식별합니다.

   새 hostnqn 을 생성하려면 다음 명령을 사용합니다.

   # nvme gen-hostnqn

2. 로컬 포트와 원격 포트의 WWNN 및 WWPN 식별자를 찾고 출력을 사용하여 하위 시스템 NQN을 찾습니다.

   # cat /sys/class/scsi_host/host*/nvme_info
   
   NVME Initiator Enabled
   XRI Dist lpfc0 Total 6144 IO 5894 ELS 250
   NVME LPORT lpfc0 WWPN x10000090fae0b5f5 WWNN x20000090fae0b5f5 DID x010f00 ONLINE
   NVME RPORT       WWPN x204700a098cbcac6 WWNN x204600a098cbcac6 DID x01050e TARGET DISCSRVC ONLINE
   
   NVME Statistics
   LS: Xmt 000000000e Cmpl 000000000e Abort 00000000
   LS XMIT: Err 00000000  CMPL: xb 00000000 Err 00000000
   Total FCP Cmpl 00000000000008ea Issue 00000000000008ec OutIO 0000000000000002
       abort 00000000 noxri 00000000 nondlp 00000000 qdepth 00000000 wqerr 00000000 err 00000000
   FCP CMPL: xb 00000000 Err 00000000

   # nvme discover --transport fc \
                   --traddr nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 \
                   --host-traddr nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5
   
   Discovery Log Number of Records 2, Generation counter 49530
   =====Discovery Log Entry 0======
   trtype:  fc
   adrfam:  fibre-channel
   subtype: nvme subsystem
   treq:    not specified
   portid:  0
   trsvcid: none
   subnqn:  nqn.1992-08.com.netapp:sn.e18bfca87d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1
   traddr:  nn-0x204600a098cbcac6:pn-0x204700a098cbcac6

   nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 을 traddr 로 교체합니다.

   nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 를 host-traddr 로 바꿉니다.

3. nvme-cli 를 사용하여 NVMe 대상에 연결합니다.

   # nvme connect --transport fc \
                  --traddr nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 \
                  --host-traddr nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 \
                  -n nqn.1992-08.com.netapp:sn.e18bfca87d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1

   nn-0x204600a098cbcac6:pn-0x204700a098cbcac6 을 traddr 로 교체합니다.

   nn-0x20000090fae0b5f5:pn-0x10000090fae0b5f5 를 host-traddr 로 바꿉니다.

   nqn.1992-08.com.netapp:sn.e18bfca8d5e11e98c0800a098cbcac6:subsystem.st14_nvme_ss_1_1 을 subnqn 으로 바꿉니다.

절차

1. nvme-cli 툴을 설치합니다.

   # dnf install nvme-cli

   그러면 /etc/ nvme/ 디렉터리에 hostn qn 파일이 생성됩니다. hostnqn 파일은 NVMe 호스트를 식별합니다.

   새 hostnqn 을 생성하려면 다음 명령을 사용합니다.

   # nvme gen-hostnqn

2. qla2xxx 모듈을 다시 로드합니다.

   # rmmod qla2xxx
   # modprobe qla2xxx

3. 로컬 포트와 원격 포트의 WWNN 및 WWPN 식별자를 찾습니다.

   # dmesg |grep traddr
   
   [    6.139862] qla2xxx [0000:04:00.0]-ffff:0: register_localport: host-traddr=nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 on portID:10700
   [    6.241762] qla2xxx [0000:04:00.0]-2102:0: qla_nvme_register_remote: traddr=nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 PortID:01050d

   이러한 host-traddr 및 traddr 값을 사용하여 하위 시스템 NQN을 찾습니다.

   # nvme discover --transport fc \
                   --traddr nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 \
                   --host-traddr nn-0x20000024ff19bb62:pn-0x21000024ff19bb62
   
   Discovery Log Number of Records 2, Generation counter 49530
   =====Discovery Log Entry 0======
   trtype:  fc
   adrfam:  fibre-channel
   subtype: nvme subsystem
   treq:    not specified
   portid:  0
   trsvcid: none
   subnqn:  nqn.1992-08.com.netapp:sn.c9ecc9187b1111e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468
   traddr:  nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6

   nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 를 traddr 로 교체합니다.

   nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 를 host-traddr 로 바꿉니다.

4. nvme-cli 툴을 사용하여 NVMe 대상에 연결합니다.

   # nvme connect  --transport fc \
                   --traddr nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 \
                   --host-traddr nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 \
                   -n nqn.1992-08.com.netapp:sn.c9ecc9187b1111e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468

   nn-0x203b00a098cbcac6:pn-0x203d00a098cbcac6 를 traddr 로 교체합니다.

   nn-0x20000024ff19bb62:pn-0x21000024ff19bb62 를 host-traddr 로 바꿉니다.

   nqn.1992-08.com.netapp:sn.c9ecc9187b11e98c0800a098cbcac6:subsystem.vs_nvme_multipath_1_subsystem_468 를 subnqn 으로 바꿉니다.

절차

1. 커널에서 네이티브 NVMe 멀티패스가 활성화되어 있는지 확인합니다.

   # cat /sys/module/nvme_core/parameters/multipath

   명령은 다음 중 하나를 표시합니다.

   N

   네이티브 NVMe 멀티패스가 비활성화되어 있습니다.

   Y

   네이티브 NVMe 멀티패스가 활성화되어 있습니다.

2. 네이티브 NVMe 멀티패스가 비활성화된 경우 다음 방법 중 하나를 사용하여 활성화합니다.

   • 커널 옵션 사용:

     1. 커널 명령줄에 nvme_core.multipath=Y 옵션을 추가합니다.

        # grubby --update-kernel=ALL --args="nvme_core.multipath=Y"

     2. 64비트 IBM Z 아키텍처에서 부팅 메뉴를 업데이트합니다.

        # zipl

     3. 시스템을 재부팅합니다.

   • 커널 모듈 구성 파일 사용:

     1. 다음 콘텐츠를 사용하여 /etc/modprobe.d/nvme_core.conf 구성 파일을 만듭니다.

        options nvme_core multipath=Y

     2. initramfs 파일 시스템을 백업합니다.

        # cp /boot/initramfs-$(uname -r).img \
             /boot/initramfs-$(uname -r).bak.$(date +%m-%d-%H%M%S).img

     3. initramfs 파일 시스템을 다시 빌드합니다.

        # dracut --force --verbose

     4. 시스템을 재부팅합니다.

3. 선택 사항: 실행 중인 시스템에서 NVMe 장치의 I/O 정책을 변경하여 사용 가능한 모든 경로에 I/O를 배포합니다.

   # echo "round-robin" > /sys/class/nvme-subsystem/nvme-subsys0/iopolicy

4. 선택 사항: udev 규칙을 사용하여 I/O 정책을 영구적으로 설정합니다. 다음 콘텐츠를 사용하여 /etc/udev/rules.d/71-nvme-io-policy.rules 파일을 생성합니다.

   ACTION=="add|change", SUBSYSTEM=="nvme-subsystem", ATTR{iopolicy}="round-robin"

검증

1. 시스템이 NVMe 장치를 인식하는지 확인합니다.

   # nvme list
   
   Node             SN                   Model                                    Namespace Usage                      Format           FW Rev
   ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- --------
   /dev/nvme0n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme0n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2

2. 연결된 모든 NVMe 하위 시스템을 나열합니다.

   # nvme list-subsys
   
   nvme-subsys0 - NQN=testnqn
   \
    +- nvme0 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme1 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme2 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live
    +- nvme3 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live

   활성 전송 유형을 확인합니다. 예를 들어 nvme0 fc 는 장치가 파이버 채널 전송을 통해 연결되어 있음을 나타내고 nvme tcp 는 장치가 TCP를 통해 연결되어 있음을 나타냅니다.

3. 커널 옵션을 편집한 경우 커널 명령줄에서 네이티브 NVMe 멀티패스가 활성화되어 있는지 확인합니다.

   # cat /proc/cmdline
   
   BOOT_IMAGE=[...] nvme_core.multipath=Y

4. DM Multipath가 NVMe 네임스페이스를 nvme0c3n1에서 nvme0 c3n1 로 보고하는지 확인합니다(예: nvme0n1 ~ nvme3n1:)

   # multipath -e -ll | grep -i nvme
   
   uuid.8ef20f70-f7d3-4f67-8d84-1bb16b2bfe03 [nvme]:nvme0n1 NVMe,Linux,4.18.0-2
   | `- 0:0:1    nvme0c0n1 0:0     n/a   optimized live
   | `- 0:1:1    nvme0c1n1 0:0     n/a   optimized live
   | `- 0:2:1    nvme0c2n1 0:0     n/a   optimized live
     `- 0:3:1    nvme0c3n1 0:0     n/a   optimized live
   
   uuid.44c782b4-4e72-4d9e-bc39-c7be0a409f22 [nvme]:nvme0n2 NVMe,Linux,4.18.0-2
   | `- 0:0:1    nvme0c0n1 0:0     n/a   optimized live
   | `- 0:1:1    nvme0c1n1 0:0     n/a   optimized live
   | `- 0:2:1    nvme0c2n1 0:0     n/a   optimized live
     `- 0:3:1    nvme0c3n1 0:0     n/a   optimized live

5. I/O 정책을 변경한 경우 NVMe 장치의 라운드 로빈이 활성 I/O 정책인지 확인합니다.

   # cat /sys/class/nvme-subsystem/nvme-subsys0/iopolicy
   
   round-robin

절차

1. 네이티브 NVMe 멀티패스가 비활성화되어 있는지 확인합니다.

   # cat /sys/module/nvme_core/parameters/multipath

   명령은 다음 중 하나를 표시합니다.

   N

   네이티브 NVMe 멀티패스가 비활성화되어 있습니다.

   Y

   네이티브 NVMe 멀티패스가 활성화되어 있습니다.

2. 네이티브 NVMe 멀티패스가 활성화된 경우 비활성화합니다.

   1. 커널 명령줄에서 nvme_core.multipath=Y 옵션을 제거합니다.

      # grubby --update-kernel=ALL --remove-args="nvme_core.multipath=Y"

   2. 64비트 IBM Z 아키텍처에서 부팅 메뉴를 업데이트합니다.

      # zipl

   3. /etc/modprobe.d/n vme_core.conf 파일에서 nvme_core=Y 줄이 있는 경우 해당 옵션을 제거합니다.
   4. 시스템을 재부팅합니다.

3. DM Multipath가 활성화되어 있는지 확인합니다.

   # systemctl enable --now multipathd.service

4. 사용 가능한 모든 경로에 I/O를 분산합니다. /etc/multipath.conf 파일에 다음 내용을 추가합니다.

   device {
     vendor "NVME"
     product ".*"
     path_grouping_policy    group_by_prio
   }

   참고

   DM Multipath가 NVMe 장치를 관리하는 경우 /sys/class/nvme-subsys0/iopolicy 구성 파일은 I/O 배포에 영향을 미치지 않습니다.

5. multipathd 서비스를 다시 로드하여 구성 변경 사항을 적용합니다.

   # multipath -r

6. initramfs 파일 시스템을 백업합니다.

   # cp /boot/initramfs-$(uname -r).img \
        /boot/initramfs-$(uname -r).bak.$(date +%m-%d-%H%M%S).img

7. initramfs 파일 시스템을 다시 빌드합니다.

   # dracut --force --verbose

검증

1. 시스템이 NVMe 장치를 인식하는지 확인합니다.

   # nvme list
   
   Node             SN                   Model                                    Namespace Usage                      Format           FW Rev
   ---------------- -------------------- ---------------------------------------- --------- -------------------------- ---------------- --------
   /dev/nvme0n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme0n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme1n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme1n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme2n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme2n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme3n1     a34c4f3a0d6f5cec     Linux                                    1         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2
   /dev/nvme3n2     a34c4f3a0d6f5cec     Linux                                    2         250.06  GB / 250.06  GB    512   B +  0 B   4.18.0-2

2. 연결된 NVMe 하위 시스템을 모두 나열합니다. 명령이 nvme0n1 에서 nvme3n2 를 통해 보고하고 있는지 확인합니다(예: nvme0c0n1 에서 nvme0c3n 1) :

   # nvme list-subsys
   
   nvme-subsys0 - NQN=testnqn
   \
    +- nvme0 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme1 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1dd:pn-0x10000090fac7e1dd live
    +- nvme2 fc traddr=nn-0x20000090fadd5979:pn-0x10000090fadd5979 host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live
    +- nvme3 fc traddr=nn-0x20000090fadd597a:pn-0x10000090fadd597a host_traddr=nn-0x20000090fac7e1de:pn-0x10000090fac7e1de live

   # multipath -ll
   
   mpathae (uuid.8ef20f70-f7d3-4f67-8d84-1bb16b2bfe03) dm-36 NVME,Linux
   size=233G features='1 queue_if_no_path' hwhandler='0' wp=rw
   `-+- policy='service-time 0' prio=50 status=active
     |- 0:1:1:1  nvme0n1 259:0   active ready running
     |- 1:2:1:1  nvme1n1 259:2   active ready running
     |- 2:3:1:1  nvme2n1 259:4   active ready running
     `- 3:4:1:1  nvme3n1 259:6   active ready running
   
   mpathaf (uuid.44c782b4-4e72-4d9e-bc39-c7be0a409f22) dm-39 NVME,Linux
   size=233G features='1 queue_if_no_path' hwhandler='0' wp=rw
   `-+- policy='service-time 0' prio=50 status=active
     |- 0:1:2:2  nvme0n2 259:1   active ready running
     |- 1:2:2:2  nvme1n2 259:3   active ready running
     |- 2:3:2:2  nvme2n2 259:5   active ready running
     `- 3:4:2:2  nvme3n2 259:7   active ready running

절차

1. 연결된 논리 볼륨의 스왑을 비활성화합니다.

   # swapoff -v /dev/VolGroup00/LogVol01

2. LVM2 논리 볼륨의 크기를 2GB 로 조정합니다.

   # lvresize /dev/VolGroup00/LogVol01 -L +2G

3. 새 스왑 공간을 포맷합니다.

   # mkswap /dev/VolGroup00/LogVol01

4. 확장된 논리 볼륨을 활성화합니다.

   # swapon -v /dev/VolGroup00/LogVol01

절차

1. 크기가 2GB 인 LVM2 논리 볼륨 만들기:

   # lvcreate VolGroup00 -n LogVol02 -L 2G

2. 새 스왑 공간을 포맷합니다.

   # mkswap /dev/VolGroup00/LogVol02

3. /etc/fstab 파일에 다음 항목을 추가합니다.

   /dev/VolGroup00/LogVol02 swap swap defaults 0 0

4. 시스템이 새 구성을 등록하도록 다시 마운트 단위를 다시 생성합니다.

   # systemctl daemon-reload

5. 논리 볼륨에서 스왑을 활성화합니다.

   # swapon -v /dev/VolGroup00/LogVol02

절차

1. 새 스왑 파일의 크기를 메가바이트로 결정하고 1024로 곱하여 블록 수를 결정합니다. 예를 들어, 64MB 스왑 파일의 블록 크기는 65536입니다.

2. 빈 파일을 생성합니다.

   # dd if=/dev/zero of=/swapfile bs=1024 count=65536

   65536 을 원하는 블록 크기와 동일한 값으로 바꿉니다.

3. 명령으로 스왑 파일을 설정합니다.

   # mkswap /swapfile

4. 읽을 수 없도록 스왑 파일의 보안을 변경합니다.

   # chmod 0600 /swapfile

5. 부팅 시 스왑 파일을 활성화하려면 다음 항목으로 /etc/fstab 파일을 편집합니다.

   /swapfile swap swap defaults 0 0

   다음에 시스템을 부팅할 때 새 스왑 파일을 활성화합니다.

6. 시스템이 새 /etc/fstab 구성을 등록하도록 다시 마운트 단위를 다시 생성합니다.

   # systemctl daemon-reload

7. 스왑 파일을 즉시 활성화합니다.

   # swapon /swapfile

절차

1. 연결된 논리 볼륨의 스왑을 비활성화합니다.

   # swapoff -v /dev/VolGroup00/LogVol01

2. LVM2 논리 볼륨을 512MB로 줄입니다.

   # lvreduce /dev/VolGroup00/LogVol01 -L -512M

3. 새 스왑 공간을 포맷합니다.

   # mkswap /dev/VolGroup00/LogVol01

4. 논리 볼륨에서 스왑을 활성화합니다.

   # swapon -v /dev/VolGroup00/LogVol01

절차

1. 연결된 논리 볼륨의 스왑을 비활성화합니다.

   # swapoff -v /dev/VolGroup00/LogVol02

2. LVM2 논리 볼륨을 제거합니다.

   # lvremove /dev/VolGroup00/LogVol02

3. /etc/fstab 파일에서 다음 관련 항목을 제거하십시오.

   /dev/VolGroup00/LogVol02 swap swap defaults 0 0

4. 시스템이 새 구성을 등록하도록 다시 마운트 단위를 다시 생성합니다.

   # systemctl daemon-reload

절차

1. 쉘 프롬프트에서 다음 명령을 실행하여 스왑 파일을 비활성화합니다. 여기서 /swapfile 은 스왑 파일입니다.

   # swapoff -v /swapfile

2. 그에 따라 /etc/fstab 파일에서 해당 항목을 제거합니다.

3. 시스템이 새 구성을 등록하도록 다시 마운트 단위를 다시 생성합니다.

   # systemctl daemon-reload

4. 실제 파일을 제거합니다.

   # rm /swapfile

절차

1. fcoe-utils 패키지를 설치합니다.

   # dnf install fcoe-utils

2. /etc/fcoe/cfg-ethx 템플릿 파일을 /etc/fcoe/cfg-interface_name 에 복사합니다. 예를 들어 FCoE를 사용하도록 enp1s0 인터페이스를 구성하려면 다음 명령을 입력합니다.

   # cp /etc/fcoe/cfg-ethx /etc/fcoe/cfg-enp1s0

3. fcoe 서비스를 활성화하고 시작합니다.

   # systemctl enable --now fcoe

4. 인터페이스 enp1s0 에서 FCoE VLAN을 검색하고, 검색된 VLAN에 대한 네트워크 장치를 생성하고, 이니시에이터를 시작합니다.

   # fipvlan -s -c enp1s0
   Created VLAN device enp1s0.200
   Starting FCoE on interface enp1s0.200
   Fibre Channel Forwarders Discovered
   interface       | VLAN | FCF MAC
   ------------------------------------------
   enp1s0          | 200  | 00:53:00:a7:e7:1b

5. 선택 사항: 검색된 대상, LUN, LUN과 연결된 장치에 대한 세부 정보를 표시합니다.

   # fcoeadm -t
   Interface:        enp1s0.200
   Roles:            FCP Target
   Node Name:        0x500a0980824acd15
   Port Name:        0x500a0982824acd15
   Target ID:        0
   MaxFrameSize:     2048 bytes
   OS Device Name:   rport-11:0-1
   FC-ID (Port ID):  0xba00a0
   State:            Online
   
   LUN ID  Device Name   Capacity   Block Size  Description
   ------  -----------  ----------  ----------  ---------------------
        0  sdb           28.38 GiB      512     NETAPP LUN (rev 820a)
        ...

   이 예에서는 SAN의 LUN 0이 /dev/sdb 장치로 호스트에 연결되었음을 보여줍니다.

사전 요구 사항

1. mt-st 패키지가 설치되어 있어야 합니다. 자세한 내용은 저하 드라이브 관리 도구 설치를 참조하십시오.For more information, see Installing tape drive management tool.

2. 테이프 드라이브를 로드합니다.

   # mt -f /dev/st0 load

절차

1. 테이프 헤드 확인:

   # mt -f /dev/st0 status
   
   SCSI 2 tape drive:
   File number=-1, block number=-1, partition=0.
   Tape block size 0 bytes. Density code 0x0 (default).
   Soft error count since last status=0
   General status bits on (50000):
    DR_OPEN IM_REP_EN

   여기:

   • 현재 파일 번호는 -1입니다.
   • 블록 번호는 테이크 헤드를 정의합니다. 기본적으로 이 값은 -1로 설정됩니다.
   • 블록 크기 0은 테이프 장치에 고정 블록 크기가 없음을 나타냅니다.
   • soft error count 는 mt status 명령을 실행한 후 발생한 오류 수를 나타냅니다.
   • 일반 상태 비트 는 테이프 장치의 통계를 설명합니다.
   • DR_OPEN 은 문이 열려 있고 테이프 장치가 비어 있음을 나타냅니다. IM_REP_EN 은 즉각적인 보고서 모드입니다.

2. 테이프 장치가 비어 있지 않으면 덮어씁니다.If the tape device is not empty, overwrite it:

   # tar -czf /dev/st0 _/source/directory

   이 명령은 테이프 장치의 데이터를 /source/directory 의 콘텐츠로 덮어씁니다.

3. /source/directory 를 테이프 장치로 백업합니다.

   # tar -czf /dev/st0 _/source/directory
   tar: Removing leading `/' from member names
   /source/directory
   /source/directory/man_db.conf
   /source/directory/DIR_COLORS
   /source/directory/rsyslog.conf
   [...]

4. 테이프 장치의 상태 보기:

   # mt -f /dev/st0  status

사전 요구 사항

1. mt-st 패키지가 설치되어 있어야 합니다. 자세한 내용은 저하 드라이브 관리 도구 설치를 참조하십시오.For more information, see Installing tape drive management tool.

2. 테이프 드라이브를 로드합니다.

   # mt -f /dev/nst0 load

절차

1. non-rewinding tape device /dev/nst0:

   # mt -f /dev/nst0 status

2. 테이프의 끝 또는 앞쪽에 있는 포인터를 지정합니다.

   # mt -f /dev/nst0 rewind

3. 테이프 장치에 데이터를 추가합니다.

   # mt -f /dev/nst0 eod
   # tar -czf /dev/nst0 /source/directory/

4. /source/directory/를 테이프 장치로 백업합니다.

   # tar -czf /dev/nst0 /source/directory/
   tar: Removing leading `/' from member names
   /source/directory/
   /source/directory/man_db.conf
   /source/directory/DIR_COLORS
   /source/directory/rsyslog.conf
   [...]

5. 테이프 장치의 상태 보기:

   # mt -f /dev/nst0  status

사전 요구 사항

1. mt-st 패키지가 설치되어 있어야 합니다. 자세한 내용은 저하 드라이브 관리 도구 설치를 참조하십시오.For more information, see Installing tape drive management tool.
2. 데이터는 테이프 장치에 기록됩니다. 자세한 내용은 deleteing tape devices or writes to non-rewinding tape devices 를 참조하십시오.

사전 요구 사항

1. mt-st 패키지가 설치되어 있어야 합니다. 자세한 내용은 저하 드라이브 관리 도구 설치를 참조하십시오.For more information, see Installing tape drive management tool.
2. 데이터는 테이프 장치에 기록됩니다. 자세한 내용은 deleteing tape devices or writes to non-rewinding tape devices 를 참조하십시오.

사전 요구 사항

1. mt-st 패키지가 설치되어 있어야 합니다. 자세한 내용은 저하 드라이브 관리 도구 설치를 참조하십시오.For more information, see Installing tape drive management tool.
2. 데이터는 테이프 장치에 기록됩니다. 자세한 내용은 deleteing tape devices or writes to non-rewinding tape devices 를 참조하십시오.

절차

1. 테이프 장치에서 데이터 삭제:

   # mt -f /dev/st0 erase

2. 테이프 장치를 언로드합니다.

   mt -f /dev/st0 offline