手順

1. アンダークラウドに stack ユーザーとしてログインします。

2. undercloud.conf がまだない場合には、サンプルのテンプレートファイルをコピーします。

   [stack@director ~]$ cp /usr/share/instack-undercloud/undercloud.conf.sample ~/undercloud.conf

3. undercloud.conf を編集します。

4. [DEFAULT] セクションを以下のように編集します。

   1. local_ip を leaf0 上のアンダークラウド IP に設定します。

      local_ip = 192.168.10.1/24

   2. undercloud_public_vip をアンダークラウドの外部向け IP アドレスに設定します。

      undercloud_public_vip = 10.1.1.1

   3. undercloud_admin_vip をアンダークラウドの管理用 IP アドレスに設定します。この IP アドレスは、通常 leaf0 上にあります。

      undercloud_admin_vip = 192.168.10.2

   4. local_interface を、ローカルネットワーク用にブリッジを設定するインターフェイスに設定します。

      local_interface = eth1

   5. enable_routed_networks を true に設定します。

      enable_routed_networks = true

   6. subnets パラメーターを使用してサブネットの一覧を定義します。ルーティング対応のスパイン/リーフ内の各レイヤー 2 セグメントにサブネットを 1 つ定義します。

      subnets = leaf0,leaf1,leaf2

   7. local_subnet パラメーターでアンダークラウドにローカルな物理レイヤー 2 セグメントに関連付けられるサブネットを指定します。

      local_subnet = leaf0

5. subnets パラメーターで定義されている各サブネットごとに新しいセクションを作成します。

   [leaf0]
   cidr = 192.168.10.0/24
   dhcp_start = 192.168.10.10
   dhcp_end = 192.168.10.90
   inspection_iprange = 192.168.10.100,192.168.10.190
   gateway = 192.168.10.1
   masquerade = False
   
   [leaf1]
   cidr = 192.168.11.0/24
   dhcp_start = 192.168.11.10
   dhcp_end = 192.168.11.90
   inspection_iprange = 192.168.11.100,192.168.11.190
   gateway = 192.168.11.1
   masquerade = False
   
   [leaf2]
   cidr = 192.168.12.0/24
   dhcp_start = 192.168.12.10
   dhcp_end = 192.168.12.90
   inspection_iprange = 192.168.12.100,192.168.12.190
   gateway = 192.168.12.1
   masquerade = False

6. undercloud.conf ファイルを保存します。

7. アンダークラウドをインストールするコマンドを実行します。

   [stack@director ~]$ openstack undercloud install

手順

1. stackrc ファイルを取得します。

   $ source ~/stackrc

2. 各カスタムロール用のフレーバーを作成します。

   $ ROLES="control0 compute_leaf0 compute_leaf1 compute_leaf2 ceph-storage_leaf0 ceph-storage_leaf1 ceph-storage_leaf2"
   $ for ROLE in $ROLES; do openstack flavor create --id auto --ram 4096 --disk 40 --vcpus 1 $ROLE ; done
   $ for ROLE in $ROLES; do openstack flavor set --property "cpu_arch"="x86_64" --property "capabilities:boot_option"="local" --property "capabilities:profile"="$ROLE" $ROLE ; done

3. 対応するリーフネットワークにノードをタグ付けします。たとえば、以下のコマンドを実行して、UUID 58c3d07e-24f2-48a7-bbb6-6843f0e8ee13 のノードを Leaf2 上の Compute ロールにタグ付けします。

   $ openstack baremetal node set --property capabilities='profile:compute_leaf2,boot_option:local' 58c3d07e-24f2-48a7-bbb6-6843f0e8ee13

4. フレーバーからロールへのマッピングが含まれた環境ファイル (~/templates/node-data.yaml) を作成します。

   parameter_defaults:
     OvercloudController0Flavor: control0
     Controller0Count: 3
     OvercloudCompute0Flavor: compute_leaf0
     Compute0Count: 3
     OvercloudCompute1Flavor: compute_leaf1
     Compute1Count: 3
     OvercloudCompute2Flavor: compute_leaf2
     Compute2Count: 3
     OvercloudCephStorage0Flavor: ceph-storage_leaf0
     CephStorage0Count: 3
     OvercloudCephStorage1Flavor: ceph-storage_leaf1
     CephStorage1Count: 3
     OvercloudCephStorage2Flavor: ceph-storage_leaf2
     CephStorage2Count: 3

   各 *Count パラメーターを使用して、オーバークラウド内にデプロイするノード数を設定することもできます。

手順

1. stackrc ファイルを取得します。

   $ source ~/stackrc

2. ベアメタルノードをチェックします。

   $ openstack baremetal node list

3. ベアメタルノードは enroll または manageable の状態であることを確認してください。ベアメタルノードがこれらのいずれかの状態でない場合には、baremetal ポートで physical_network プロパティーの設定に使用するコマンドは失敗します。全ノードを manageable の状態に設定するには、以下のコマンドを実行します。

   $ for node in $(openstack baremetal node list -f value -c Name); do openstack baremetal node manage $node --wait; done

4. baremetal ポートが関連付けられている baremetal ノードを確認します。以下に例を示します。

   $ openstack baremetal port list --node <node-uuid>

5. ポートの physical-network パラメーターを設定します。以下の例では、leaf0、leaf1、および leaf2 の 3 つのサブネットが設定で定義されています。local_subnet は leaf0 です。local_subnet の物理ネットワークは常に ctlplane であるため、leaf0 に接続されたベアメタルポートは必ず ctlplane を使用します。残りのポートは他のリーフ名を使用します。

   $ openstack baremetal port set --physical-network ctlplane <port-uuid>
   $ openstack baremetal port set --physical-network leaf1 <port-uuid>
   $ openstack baremetal port set --physical-network leaf2 <port-uuid>
   $ openstack baremetal port set --physical-network leaf2 <port-uuid>

6. オーバークラウドをデプロイする前にノードが使用可能な状態であることを確認します。

   $ openstack overcloud node provide --all-manageable

手順

1. stack ユーザーのローカルディレクトリーに、新しい network_data_spine_leaf.yaml ファイルを作成します。デフォルトの network_data ファイルをベースとして使用します。

   $ cp /usr/share/openstack-tripleo-heat-templates/network_data.yaml /home/stack/network_data_spine_leaf.yaml

2. network_data_spine_leaf.yaml ファイルで、各ネットワークとリーフネットワークをコンポーザブルネットワーク項目として定義する YAML リストを作成します。たとえば、内部 API ネットワークとそのリーフネットワークは、以下の構文を使用して定義します。

   # Internal API
   - name: InternalApi
     name_lower: internal_api
     vip: true
     ip_subnet: '172.18.0.0/24'
     allocation_pools: [{'start': '172.18.0.4', 'end': '172.18.0.250'}]
   - name: InternalApi1
     name_lower: internal_api1
     vip: false
     ip_subnet: '172.18.1.0/24'
     allocation_pools: [{'start': '172.18.1.4', 'end': '172.18.1.250'}]
   - name: InternalApi2
     name_lower: internal_api2
     vip: false
     ip_subnet: '172.18.2.0/24'
     allocation_pools: [{'start': '172.18.2.4', 'end': '172.18.2.250'}]

手順

1. stack ユーザーのローカルディレクトリー内に、カスタム roles ディレクトリーを作成します。

   $ mkdir ~/roles

2. デフォルトの Controller、Compute、Ceph Storage ロールを、director のコアテンプレートコレクションから ~/roles ディレクトリーにコピーします。Leaf 1 用にファイルの名前を変更します。

   $ cp /usr/share/openstack-tripleo-heat-templates/roles/Controller.yaml ~/roles/Controller.yaml
   $ cp /usr/share/openstack-tripleo-heat-templates/roles/Compute.yaml ~/roles/Compute1.yaml
   $ cp /usr/share/openstack-tripleo-heat-templates/roles/CephStorage.yaml ~/roles/CephStorage1.yaml

3. Compute1.yaml ファイルを編集します。

   $ vi ~/roles/Compute1.yaml

4. このファイルで name、networks、および HostnameFormatDefault のパラメーターを編集して、Leaf 1 固有のパラメーターと一致するようにします。以下に例を示します。

   - name: Compute1
     ...
     networks:
       - InternalApi1
       - Tenant1
       - Storage1
     HostnameFormatDefault: '%stackname%-compute1-%index%'

   このファイルを保存します。

5. CephStorage1.yaml ファイルを編集します。

   $ vi ~/roles/CephStorage1.yaml

6. このファイルで name および networks のパラメーターを編集して、Leaf 1 固有のパラメーターと一致するようにします。また、HostnameFormatDefault パラメーターを追加して、Ceph Storage ノード用の Leaf 1 のホスト名を定義します。以下に例を示します。

   - name: CephStorage1
     ...
     networks:
       - Storage1
       - StorageMgmt1
     HostnameFormatDefault: '%stackname%-cephstorage1-%index%'

   このファイルを保存します。

7. Leaf 1 の Compute および Ceph Storage ファイルをベースとして、Leaf 2 および Leaf 3 ファイル用にコピーを作成します。

   $ cp ~/roles/Compute1.yaml ~/roles/Compute2.yaml
   $ cp ~/roles/Compute1.yaml ~/roles/Compute3.yaml
   $ cp ~/roles/CephStorage1.yaml ~/roles/CephStorage2.yaml
   $ cp ~/roles/CephStorage1.yaml ~/roles/CephStorage3.yaml

8. Leaf 2 および Leaf 3 のファイルで name、networks、および HostnameFormatDefault のパラメーターを編集して、対応するリーフネットワークのパラメーターと一致するようにします。たとえば、Leaf 2 Compute ファイルのパラメーター値は、以下のように設定します。

   - name: Compute2
     ...
     networks:
       - InternalApi2
       - Tenant2
       - Storage2
     HostnameFormatDefault: '%stackname%-compute2-%index%'

   Leaf 2 Ceph Storage ファイルのパラメーター値は、以下のように設定します。

   - name: CephStorage2
     ...
     networks:
       - Storage2
       - StorageMgmt2
     HostnameFormatDefault: '%stackname%-cephstorage2-%index%'

9. ロールの準備が整ったら、以下のコマンドで完全なロールデータファイルを生成します。

   $ openstack overcloud roles generate --roles-path ~/roles -o roles_data_spine_leaf.yaml Controller Compute1 Compute2 Compute3 CephStorage1 CephStorage2 CephStorage3

   これにより、各リーフネットワーク用の全カスタムロールが含まれた完全な roles_data_spine_leaf.yaml ファイルが作成されます。

手順

1. コア Heat テンプレートディレクトリーに移動します。

   $ cd /usr/share/openstack-tripleo-heat-templates

2. tools/process-templates.py スクリプト、カスタム network_data ファイル、およびカスタム roles_data ファイルを使用して、Jinja2 テンプレートをレンダリングします。

   $ tools/process-templates.py -n /home/stack/network_data_spine_leaf.yaml \
       -r /home/stack/roles_data_spine_leaf.yaml \
       -o /home/stack/openstack-tripleo-heat-templates-spine-leaf

3. ホームディレクトリーに移動します。

   $ cd /home/stack

4. デフォルト NIC テンプレートのいずれかからコンテンツをコピーし、スパイン/リーフ型テンプレートのベースとして使用します。たとえば、single-nic-vlans をコピーするには、以下のコマンドを実行します。

   $ cp -r openstack-tripleo-heat-templates-spine-leaf/network/config/single-nic-vlans/* \
       /home/stack/templates/spine-leaf-nics/.

5. レンダリング済みテンプレートのディレクトリーを削除します。

   $ rm -rf openstack-tripleo-heat-templates-spine-leaf

手順

1. カスタムの NIC ディレクトリーに移動します。

   $ cd ~/templates/spine-leaf-nics/

2. controller0.yaml テンプレートを編集します。

3. parameters セクションの ControlPlaneSubnetCidr パラメーターおよび ControlPlaneDefaultRoute パラメーターまでスクロールします。これらのパラメーターは、以下のスニペットのようになります。

     ControlPlaneSubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlaneDefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     ControlPlane0SubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlane0DefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

4. parameters セクションの EC2MetadataIp パラメーターまでスクロールします。このパラメーターは、以下のスニペットのようになります。

     EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     Leaf0EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

5. ネットワーク設定のセクションまでスクロールします。このセクションの例を以下に示します。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: ../../scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

   スクリプトの場所を絶対パスに変更します。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

6. network_config セクションで、コントロールプレーンとプロビジョニングのインターフェイスを定義します。以下に例を示します。

                 network_config:
                 - type: ovs_bridge
                   name: bridge_name
                   use_dhcp: false
                   dns_servers:
                     get_param: DnsServers
                   addresses:
                   - ip_netmask:
                       list_join:
                       - /
                       - - get_param: ControlPlaneIp
                         - get_param: ControlPlane0SubnetCidr
                   routes:
                   - ip_netmask: 169.254.169.254/32
                     next_hop:
                       get_param: Leaf0EC2MetadataIp
                   - ip_netmask: 192.168.10.0/24
                     next_hop:
                       get_param: ControlPlane0DefaultRoute

   この例で使用されているパラメーターは Leaf0 固有の ControlPlane0SubnetCidr、Leaf0EC2MetadataIp、および ControlPlane0DefaultRoute です。ルートとして使用されているプロビジョニングネットワーク (192.168.10.0/24) 上の Leaf0 の CIDR の使用方法にも注目してください。

7. members セクションの各 VLAN には、関連する Leaf0 パラメーターが含まれます。たとえば、Storage ネットワークの VLAN 情報は、以下のスニペットのようになります。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet

   ルーティングのパラメーターを定義するセクションを追加します。これには、supernet ルート (ここでは StorageSupernet) およびリーフのデフォルトルート (ここでは Storage0InterfaceDefaultRoute) が含まれます。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet
                     routes:
                     - ip_netmask:
                         get_param: StorageSupernet
                       next_hop:
                         get_param: Storage0InterfaceDefaultRoute

   Storage、StorageMgmt、InternalApi、および Tenant コントローラーネットワーク用 VLAN 設定のルートを追加します。

8. このファイルを保存します。

手順

1. カスタムの NIC ディレクトリーに移動します。

   $ cd ~/templates/spine-leaf-nics/

2. compute0.yaml テンプレートを編集します。

3. parameters セクションの ControlPlaneSubnetCidr パラメーターおよび ControlPlaneDefaultRoute パラメーターまでスクロールします。これらのパラメーターは、以下のスニペットのようになります。

     ControlPlaneSubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlaneDefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     ControlPlane0SubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlane0DefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

4. parameters セクションの EC2MetadataIp パラメーターまでスクロールします。このパラメーターは、以下のスニペットのようになります。

     EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     Leaf0EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

5. ネットワーク設定のセクションまでスクロールします。このセクションは、以下のスニペットのようになります。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: ../../scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

   スクリプトの場所を絶対パスに変更します。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

6. network_config セクションで、コントロールプレーンとプロビジョニングのインターフェイスを定義します。以下に例を示します。

                 network_config:
                 - type: interface
                   name: nic1
                   use_dhcp: false
                   dns_servers:
                     get_param: DnsServers
                   addresses:
                   - ip_netmask:
                       list_join:
                       - /
                       - - get_param: ControlPlaneIp
                         - get_param: ControlPlane0SubnetCidr
                   routes:
                   - ip_netmask: 169.254.169.254/32
                     next_hop:
                       get_param: Leaf0EC2MetadataIp
                   - ip_netmask: 192.168.10.0/24
                     next_hop:
                       get_param: ControlPlane0DefaultRoute

   この例で使用されているパラメーターは Leaf0 固有の ControlPlane0SubnetCidr、Leaf0EC2MetadataIp、および ControlPlane0DefaultRoute です。ルートとして使用されているプロビジョニングネットワーク (192.168.10.0/24) 上の Leaf0 の CIDR の使用方法にも注目してください。

7. members セクションの各 VLAN には、関連する Leaf0 パラメーターが含まれている必要があります。たとえば、Storage ネットワークの VLAN 情報は、以下のスニペットのようになります。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet

   ルーティングのパラメーターを定義するセクションを追加します。これには、supernet ルート (ここでは StorageSupernet) およびリーフのデフォルトルート (ここでは Storage0InterfaceDefaultRoute) が含まれます。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet
                     routes:
                     - ip_netmask:
                         get_param: StorageSupernet
                       next_hop:
                         get_param: Storage0InterfaceDefaultRoute

   Storage、InternalApi、および Tenant コントローラーネットワークの VLAN 設定を追加します。

8. このファイルを保存します。

9. compute1.yaml を編集して、同じ手順を実施します。変更の一覧は以下のとおりです。

   • ControlPlaneSubnetCidr を ControlPlane1SubnetCidr に変更します。
   • ControlPlaneDefaultRoute を ControlPlane1DefaultRoute に変更します。
   • EC2MetadataIp を Leaf1EC2MetadataIp に変更します。
   • ネットワーク設定スクリプトを ../../scripts/run-os-net-config.sh から /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh に変更します。
   • Leaf1 パラメーターを使用するように、コントロールプレーンとプロビジョニングのインターフェイスを変更します。
   • Leaf1 ルートが含まれるように各 VLAN を変更します。

   編集が終わったらファイルを保存してください。

10. compute2.yaml を編集して、同じ手順を実施します。変更の一覧は以下のとおりです。

    • ControlPlaneSubnetCidr を ControlPlane2SubnetCidr に変更します。
    • ControlPlaneDefaultRoute を ControlPlane2DefaultRoute に変更します。
    • EC2MetadataIp を Leaf2EC2MetadataIp に変更します。
    • ネットワーク設定スクリプトを ../../scripts/run-os-net-config.sh から /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh に変更します。
    • Leaf2 パラメーターを使用するように、コントロールプレーンとプロビジョニングのインターフェイスを変更します。
    • Leaf2 ルートが含まれるように各 VLAN を変更します。

    編集が終わったらファイルを保存してください。

手順

1. カスタムの NIC ディレクトリーに移動します。

   $ cd ~/templates/spine-leaf-nics/

2. parameters セクションの ControlPlaneSubnetCidr パラメーターおよび ControlPlaneDefaultRoute パラメーターまでスクロールします。これらのパラメーターは、以下のスニペットのようになります。

     ControlPlaneSubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlaneDefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     ControlPlane0SubnetCidr: # Override this via parameter_defaults
       default: '24'
       description: The subnet CIDR of the control plane network.
       type: string
     ControlPlane0DefaultRoute: # Override this via parameter_defaults
       description: The default route of the control plane network.
       type: string

3. parameters セクションの EC2MetadataIp パラメーターまでスクロールします。このパラメーターは、以下のスニペットのようになります。

     EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

   Leaf0 に応じてこれらのパラメーターを変更します。

     Leaf0EC2MetadataIp: # Override this via parameter_defaults
       description: The IP address of the EC2 metadata server.
       type: string

4. ネットワーク設定のセクションまでスクロールします。このセクションは、以下のスニペットのようになります。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: ../../scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

   スクリプトの場所を絶対パスに変更します。

   resources:
     OsNetConfigImpl:
       type: OS::Heat::SoftwareConfig
       properties:
         group: script
         config:
           str_replace:
             template:
               get_file: /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh
             params:
               $network_config:
                 network_config:

5. network_config セクションで、コントロールプレーンとプロビジョニングのインターフェイスを定義します。以下に例を示します。

                 network_config:
                 - type: interface
                   name: nic1
                   use_dhcp: false
                   dns_servers:
                     get_param: DnsServers
                   addresses:
                   - ip_netmask:
                       list_join:
                       - /
                       - - get_param: ControlPlaneIp
                         - get_param: ControlPlane0SubnetCidr
                   routes:
                   - ip_netmask: 169.254.169.254/32
                     next_hop:
                       get_param: Leaf0EC2MetadataIp
                   - ip_netmask: 192.168.10.0/24
                     next_hop:
                       get_param: ControlPlane0DefaultRoute

   この例で使用されているパラメーターは Leaf0 固有の ControlPlane0SubnetCidr、Leaf0EC2MetadataIp、および ControlPlane0DefaultRoute です。ルートとして使用されているプロビジョニングネットワーク (192.168.10.0/24) 上の Leaf0 の CIDR の使用方法にも注目してください。

6. members セクションの各 VLAN には、関連する Leaf0 パラメーターが含まれます。たとえば、Storage ネットワークの VLAN 情報は、以下のスニペットのようになります。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet

   ルーティングのパラメーターを定義するセクションを追加します。これには、supernet ルート (ここでは StorageSupernet) およびリーフのデフォルトルート (ここでは Storage0InterfaceDefaultRoute) が含まれます。

                   - type: vlan
                     vlan_id:
                       get_param: Storage0NetworkVlanID
                     addresses:
                     - ip_netmask:
                         get_param: Storage0IpSubnet
                     routes:
                     - ip_netmask:
                         get_param: StorageSupernet
                       next_hop:
                         get_param: Storage0InterfaceDefaultRoute

   Storage、StorageMgmt コントローラーネットワークの VLAN 設定を追加します。

7. このファイルを保存します。

8. ceph-storage1.yaml を編集して、同じ手順を実施します。変更の一覧は以下のとおりです。

   • ControlPlaneSubnetCidr を ControlPlane1SubnetCidr に変更します。
   • ControlPlaneDefaultRoute を ControlPlane1DefaultRoute に変更します。
   • EC2MetadataIp を Leaf1EC2MetadataIp に変更します。
   • ネットワーク設定スクリプトを ../../scripts/run-os-net-config.sh から /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh に変更します。
   • Leaf1 パラメーターを使用するように、コントロールプレーンとプロビジョニングのインターフェイスを変更します。
   • Leaf1 ルートが含まれるように各 VLAN を変更します。

   編集が終わったらファイルを保存してください。

9. ceph-storage2.yaml を編集して、同じ手順を実施します。変更の一覧は以下のとおりです。

   • ControlPlaneSubnetCidr を ControlPlane2SubnetCidr に変更します。
   • ControlPlaneDefaultRoute を ControlPlane2DefaultRoute に変更します。
   • EC2MetadataIp を Leaf2EC2MetadataIp に変更します。
   • ネットワーク設定スクリプトを ../../scripts/run-os-net-config.sh から /usr/share/openstack-tripleo-heat-templates/network/scripts/run-os-net-config.sh に変更します。
   • Leaf2 パラメーターを使用するように、コントロールプレーンとプロビジョニングのインターフェイスを変更します。
   • Leaf2 ルートが含まれるように各 VLAN を変更します。

   編集が終わったらファイルを保存してください。

手順

1. stack ユーザーの templates ディレクトリーに network-environment.yaml ファイルを作成します。

2. 環境ファイルに以下のセクションを追加します。

   resource_registry:
   
   parameter_defaults:

   以下の点に注意してください。

   • resource_registry は、ネットワークリソースをそれぞれの NIC テンプレートにマッピングします。
   • parameter_defaults は、お使いの設定に関連した追加のネットワークパラメーターを定義します。

手順

1. network-environment.yaml ファイルを編集します。

2. resource_registry にリソースマッピングを追加します。リソース名には以下の形式を使用します。

   OS::TripleO::[ROLE]::Net::SoftwareConfig: [NIC TEMPLATE]

   本ガイドのシナリオでは、resource_registry に以下のリソースマッピングが含まれます。

   resource_registry:
     OS::TripleO::Controller0::Net::SoftwareConfig: ./spine-leaf-nics/controller0.yaml
     OS::TripleO::Compute0::Net::SoftwareConfig: ./spine-leaf-nics/compute0.yaml
     OS::TripleO::Compute1::Net::SoftwareConfig: ./spine-leaf-nics/compute1.yaml
     OS::TripleO::Compute2::Net::SoftwareConfig: ./spine-leaf-nics/compute2.yaml
     OS::TripleO::CephStorage0::Net::SoftwareConfig: ./spine-leaf-nics/cephstorage0.yaml
     OS::TripleO::CephStorage1::Net::SoftwareConfig: ./spine-leaf-nics/cephstorage1.yaml
     OS::TripleO::CephStorage2::Net::SoftwareConfig: ./spine-leaf-nics/cephstorage2.yaml

3. spine-leaf-ctlplane.yaml ファイルを保存します。

手順

1. network-environment.yaml ファイルを編集します。

2. parameter_defaults セクションに supernet ルートパラメーターを追加します。各分離ネットワークごとに supernet ルートを適用する必要があります。以下に例を示します。

   parameter_defaults:
     StorageSupernet: 172.16.0.0/16
     StorageMgmtSupernet: 172.17.0.0/16
     InternalApiSupernet: 172.18.0.0/16
     TenantSupernet: 172.19.0.0/16

   注記

   ネットワークインターフェイステンプレートには、各ネットワークの supernet パラメーターを指定する必要があります。以下に例を示します。

   - type: vlan
     vlan_id:
       get_param: Storage0NetworkVlanID
     addresses:
     - ip_netmask:
         get_param: Storage0IpSubnet
     routes:
     - ip_netmask:
         get_param: StorageSupernet
       next_hop:
         get_param: Storage0InterfaceDefaultRoute

3. parameter_defaults セクションに ServiceNetMap HostnameResolveNetwork パラメーターを追加して、リーフの各ノードに他のリーフノードを解決するのに使用するホスト名の一覧を提供します。以下に例を示します。

   parameter_defaults:
     ...
     ServiceNetMap:
       Compute1HostnameResolveNetwork: internal_api1
       Compute2HostnameResolveNetwork: internal_api2
       Compute3HostnameResolveNetwork: internal_api3
       CephStorage1HostnameResolveNetwork: storage1
       CephStorage2HostnameResolveNetwork: storage2
       CephStorage3HostnameResolveNetwork: storage3

   コンピュートノードはリーフの Internal API ネットワークを使用し、Ceph Storage ノードはリーフの Storage ネットワークを使用します。

4. 以下の ExtraConfig 設定を parameter_defaults セクションに追加して、コンピュートノードおよび Ceph Storage ノード上の特定のコンポーネントのルーティングに対応します。

   表4.1 コンピュートの ExtraConfig パラメーター

   パラメーター	この値に設定します
   nova::compute::libvirt::vncserver_listen	VNC サーバーがリッスンする IP アドレス
   nova::compute::vncserver_proxyclient_address	VNC プロキシークライアントを実行しているサーバーの IP アドレス
   neutron::agents::ml2::ovs::local_ip	OpenStack Networking (neutron) トンネルエンドポイントの IP アドレス
   cold_migration_ssh_inbound_addr	コールドマイグレーション SSH 接続用のローカル IP アドレス
   live_migration_ssh_inbound_addr	ライブマイグレーション SSH 接続用のローカル IP アドレス
   nova::migration::libvirt::live_migration_inbound_addr	ライブマイグレーションのトラフィックに使用される IP アドレス 注記 SSL/TLS を使用している場合は、ネットワーク名の前に fqdn_を追加して、証明書が FQDN に対してチェックされるようにします。
   nova::my_ip	ホスト上の Compute (nova) サービスの IP アドレス
   tripleo::profile::base::database::mysql::client::mysql_client_bind_address	データベースクライアントの IP アドレス。この場合、コンピュートノード上の mysql クライアントになります。

   表4.2 CephAnsibleExtraConfig パラメーター

   パラメーター	この値に設定します
   public_network	Ceph ノードが含まれるすべてのストレージネットワークのコンマ区切りの一覧 (リーフごとに 1 つ)。たとえば、172.16.0.0/24,172.16.1.0/24,172.16.2.0/24。
   cluster_network	Ceph ノードが含まれるストレージ管理ネットワークのコンマ区切りの一覧 (リーフごとに 1 つ)。たとえば、172.17.0.0/24,172.17.1.0/24,172.17.2.0/24。

   以下に例を示します。

   parameter_defaults:
     ...
     Compute1ExtraConfig:
       nova::compute::libvirt::vncserver_listen: "%{hiera('internal_api1')}"
       nova::compute::vncserver_proxyclient_address: "%{hiera('internal_api1')}"
       neutron::agents::ml2::ovs::local_ip: "%{hiera('tenant1')}"
       cold_migration_ssh_inbound_addr: "%{hiera('internal_api1')}"
       live_migration_ssh_inbound_addr: "%{hiera('internal_api1')}"
       nova::migration::libvirt::live_migration_inbound_addr: "%{hiera('internal_api1')}"
       nova::my_ip: "%{hiera('internal_api1')}"
       tripleo::profile::base::database::mysql::client::mysql_client_bind_address: "%{hiera('internal_api1')}"
   
     Compute2ExtraConfig:
       nova::compute::libvirt::vncserver_listen: "%{hiera('internal_api2')}"
       nova::compute::vncserver_proxyclient_address: "%{hiera('internal_api2')}"
       neutron::agents::ml2::ovs::local_ip: "%{hiera('tenant2')}"
       cold_migration_ssh_inbound_addr: "%{hiera('internal_api2')}"
       live_migration_ssh_inbound_addr: "%{hiera('internal_api2')}"
       nova::migration::libvirt::live_migration_inbound_addr: "%{hiera('internal_api2')}"
       nova::my_ip: "%{hiera('internal_api2')}"
       tripleo::profile::base::database::mysql::client::mysql_client_bind_address: "%{hiera('internal_api2')}"
   
     Compute3ExtraConfig:
       nova::compute::libvirt::vncserver_listen: "%{hiera('internal_api3')}"
       nova::compute::vncserver_proxyclient_address: "%{hiera('internal_api3')}"
       neutron::agents::ml2::ovs::local_ip: "%{hiera('tenant3')}"
       cold_migration_ssh_inbound_addr: "%{hiera('internal_api3')}"
       live_migration_ssh_inbound_addr: "%{hiera('internal_api3')}"
       nova::migration::libvirt::live_migration_inbound_addr: "%{hiera('internal_api3')}"
       nova::my_ip: "%{hiera('internal_api3')}"
       tripleo::profile::base::database::mysql::client::mysql_client_bind_address: "%{hiera('internal_api3')}"
   
     CephAnsibleExtraConfig:
       public_network: '172.16.0.0/24,172.16.1.0/24,172.16.2.0/24'
       cluster_network: '172.17.0.0/24,172.17.1.0/24,172.17.2.0/24'

手順

1. network-environment.yaml ファイルを編集します。

2. parameter_defaults セクションを以下のように編集します。

   1. メインのコントロールプレーンのサブネットへのマッピングを追加します。

      parameter_defaults:
        ...
        ControlPlaneSubnet: leaf0

   2. 各スパイン/リーフ型ネットワーク用のコントロールプレーンのサブネットへのマッピングを追加します。

      parameter_defaults:
        ...
        Controller0ControlPlaneSubnet: leaf0
        Compute0ControlPlaneSubnet: leaf0
        Compute1ControlPlaneSubnet: leaf1
        Compute2ControlPlaneSubnet: leaf2
        CephStorage0ControlPlaneSubnet: leaf0
        CephStorage1ControlPlaneSubnet: leaf1
        CephStorage2ControlPlaneSubnet: leaf2

   3. 各リーフにコントロールプレーンのルートを追加します。

      parameter_defaults:
        ...
        ControlPlane0DefaultRoute: 192.168.10.1
        ControlPlane0SubnetCidr: '24'
        ControlPlane1DefaultRoute: 192.168.11.1
        ControlPlane1SubnetCidr: '24'
        ControlPlane2DefaultRoute: 192.168.12.1
        ControlPlane2SubnetCidr: '24'

      デフォルトルートのパラメーターは通常、プロビジョニングサブネットの gateway に設定される IP アドレスです。この情報については、undercloud.conf ファイルを参照してください。

   4. EC2 メタデータ IP 用のパラメーターを追加します。

      parameter_defaults:
        ...
        Leaf0EC2MetadataIp: 192.168.10.1
        Leaf1EC2MetadataIp: 192.168.11.1
        Leaf2EC2MetadataIp: 192.168.12.1

      これらは、EC2 メタデータサービス (169.254.169.254/32) 用のコントロールプレーンを介したルートとして機能します。これは通常、プロビジョニングネットワーク上の各リーフの gateway に設定します。

3. spine-leaf-ctlplane.yaml ファイルを保存します。

手順

1. /home/stack/template/network_data_spine_leaf.yaml をチェックして、各リーフ用のネットワークがすべて含まれていることを確認します。

   注記

   ネットワークサブネットと allocation_pools の値に対して実行される検証は現在ありません。これらの値が整合性を維持して定義され、既存ネットワークとの競合が発生しないことを確認してください。

2. ~/templates/spine-leaf-nics/ に含まれている NIC テンプレートをチェックして、各リーフ上の各ロールのインターフェイスが正しく定義されていることを確認します。
3. network-environment.yaml 環境ファイルをチェックして、ネットワークデータファイルでは制御できない全カスタムパラメーターが定義されていることを確認します。これには、ルート、コントロールプレーンのパラメーター、各ロールのカスタム NIC テンプレートを参照する resource_registry セクションが含まれます。
4. /home/stack/templates/roles_data_spine_leaf.yaml の値をチェックして、各リーフのロールが定義されていることを確認します。
5. /home/stack/templates/nodes_data.yaml ファイルをチェックして、全ロールにフレーバーとノード数が割り当てられていることを確認します。また、各リーフの全ノードが正しくタグ付けされていることも確認してください。

6. openstack overcloud deploy コマンドを実行して、スパイン/リーフの設定を適用します。以下に例を示します。

   openstack overcloud deploy --templates \
   -n /home/stack/template/network_data_spine_leaf.yaml \
   -r /home/stack/templates/roles_data_spine_leaf.yaml \
   -e /usr/share/openstack-tripleo-heat-templates/environments/network-isolation.yaml \
   -e /home/stack/templates/network-environment.yaml \
   -e /home/stack/templates/nodes_data.yaml \
   -e [OTHER ENVIRONMENT FILES]

   • network-isolation.yaml は、同じ場所にある Jinja2 ファイル (network-isolation.j2.yaml) のレンダリング後の名前です。このファイルを追加して、director が各ネットワークを正しいリーフに分離できるようにします。これにより、ネットワークはオーバークラウドの作成プロセス中に動的に作成されるようになります。
   • network-isolation.yaml およびその他のネットワークベースの環境ファイルの後に、network-environment.yaml ファイルを追加します。これにより、network-environment.yaml 内に定義されたパラメーターおよびリソースが、他の環境ファイルで以前に定義された同じパラメーターおよびリソースをオーバーライドするようになります。
   • 環境ファイルを更に追加します (例: コンテナーイメージの場所や Ceph クラスターの設定を定義した環境ファイルなど)。
7. スパイン/リーフ対応のオーバークラウドがデプロイされるまで待ちます。