ネットワーク トポロジの選択
開始するには、ネットワーク トポロジを選択します。
10GE または 1GE ToR 物理ネットワークとケーブルのセクションが完了したら、ネットワークの共通要件チェックリスト に進みます。
10 ギガビット イーサネット トポロジ
10 ギガビット イーサネット(GE)スイッチ トポロジは、スイッチ(デュアルまたはスタック スイッチを使用している場合)、リンクおよびポートの障害からネットワークを保護する完全冗長設計を提供します。10 GE スイッチは、1 つまたは 2 つのスタンドアロン スイッチとして使用したり、スイッチ スタックの構成に使用したりすることができます。
10 ギガビット イーサネット トポロジ用 Cisco IMC 接続
2 ノード 10 ギガビット イーサネット (GE) トポロジに、次の Cisco IMC 接続オプションのいずれかを選択します。
-
専用の 1GE Cisco IMC 管理ポートを使用することが推奨されます。このオプションには追加のポートとケーブルが必要ですが、ネットワークの競合を防ぎ、各物理サーバへのアウト オブ バンド アクセスを常にオンにすることができます。
-
共有 LOM 拡張モード (EXT) の使用。このモードでは、シングル ワイヤ管理が使用され、Cisco IMC トラフィックが 10GE VIC 接続に多重化されます。このモードで操作する場合、トラフィックの複数のストリームが同じ物理リンク上で共有され、妨害のない到達可能性は保証されません。この展開オプションは推奨されません。
-
ファブリック インターコネクトベース環境では、シングル ワイヤ管理を使用する場合、内蔵 QpS により Cisco IMC およびサーバ管理への妨害のないアクセスが保証されます。HyperFlex Edge 環境では、QoS が適用されないため、専用管理ポートの使用が推奨されます。
-
-
同様の Cisco UCS C シリーズ サーバについては、『サーバ設置およびサービス ガイド』の次の手順に従い、Cisco IMC に IPv4 管理アドレスを割り当てます。HyperFlex は IPv6 アドレスをサポートしていません。
10GE トポロジ用物理ネットワークおよびケーブル接続
VLAN 機能を備えたマネージド スイッチ (1 または 2) が必要です。Cisco は、Catalyst および Nexus スイッチング プラットフォームのリファレンス構成を完全にテストし、提供します。これらのスイッチのいずれかを選択すると、最高レベルの互換性が提供され、円滑な展開とシームレスな継続的運用が可能になります。
デュアル スイッチの設定には、スイッチの障害、リンクの障害、ポートの障害から保護する完全な冗長性を備えた、少し複雑なトポロジが含まれます。スタンドアロンまたはスタック構成が行われている 2 つのスイッチと、2 つの 10GE ポート、CIMC 管理用の 1 つの 1GE ポート、サーバごとに 1 つの Cisco VIC 1457 が必要です。トランク ポートは、唯一サポートされているネットワーク ポート設定です。
シングル スイッチの設定では、サーバごとに 1 台のスイッチ、2 つの 10 GE ポート、CIMC 管理の 1GE ポート、1 個の Cisco VIC 1457 のみを必要とするシンプルなトポロジが実現します。スイッチ レベルの冗長性は提供されませんが、すべてのリンク/ポートおよび関連するネットワーク サービスは完全に冗長であり、障害を許容することができます。
次の要件は両方の 10GE トポロジに共通であり、展開を開始する前に満たす必要があります。
-
サーバごとの専用 1 ギガビット イーサネット (GE) Cisco IMC 管理ポート (推奨)
-
専用 Cisco IMC 管理ポート (お客様が提供) 用の 2 個の 1GE ToR スイッチ ポートと、2 本のカテゴリ 6 イーサネット ケーブル
-
-
Cisco VIC 1457 (各サーバの MLOM スロットに取り付けられている)
-
旧世代の Cisco VIC ハードウェアは、2 ノードまたは 4 ノードの HX Edge クラスタではサポートされていません。
-
4 個の 10GE ToR スイッチ ポートおよび 4 本の 10GE SFP + または SFP28 ケーブル (お客様が提供。選択したケーブルがスイッチ モデルと互換性があることを確認します。)
-
10GE 速度のみがサポートされています (1GE、25GE、40GE なし)
-
物理的なケーブル接続を続行するには、シングル スイッチまたはデュアル スイッチの設定を選択します。
10 ギガビット イーサネット デュアル スイッチの物理的なケーブル接続
警告 |
適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。 |
冗長性を追加するためデュアル ToR を使用して展開する場合 (ビジュアル レイアウトについては、次の図を参照してください)。
-
専用の Cisco IMC を使用している場合は、各サーバ (サーバの背面に「M」というラベルが付いている) の 1GE 管理ポートを 2 つのスイッチのいずれかに接続します。
-
Cisco VIC の 4 つの 10GE ポートのうち 1 個を、各サーバから同じ ToR スイッチに接続します。
-
同じスイッチに接続するには、各サーバで同じポート番号を使用します。
(注)
同じ VIC ポート番号を使用しない場合、サーバ間のトラフィックに対して余分なホップが発生し、2 つのスイッチ間で不必要に帯域幅が消費されます。
-
-
Cisco VIC の 2 番目の 10GE ポートを、各サーバからもう一方の ToR スイッチに接続します。同じスイッチに接続するには、各サーバで同じポート番号を使用します。
-
クラスタのインストール前に追加の 10GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 10GE ポートをゲスト VM トラフィックにオプションで使用することができます。
10 ギガビット イーサネット シングル スイッチの物理的なケーブル接続
警告 |
適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。 |
1 個の ToR を使用して展開する場合 (ビジュアル レイアウトについては、次の図を参照してください)。
-
専用の Cisco IMC を使用している場合は、各サーバ (サーバの背面にある「M」というラベルが付いた) の 1GE 管理ポートをスイッチに接続します。
-
Cisco VIC の 4 つの 10GE ポートのうち 2 つを、各サーバから同じ ToR スイッチに接続します。
-
クラスタのインストール前に追加の 10GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 10GE ポートをゲスト VM トラフィックにオプションで使用することができます。
2 ノード 10 ギガビット イーサネット トポロジの仮想ネットワーク設計
このセクションでは、仮想ネットワーク セットアップについて説明しています。HyperFlex 展開プロセスにより自動で仮想ネットワークがセットアップされるため、アクションは必要ありません。これらの詳細は、情報およびトラブルシューティング目的で下記に記載されています。
仮想スイッチ
vSwitch が 4 つ必要です。
-
vswitch-hx-inband-mgmt:ESXi 管理(vmk0)、ストレージ コントローラ管理ネットワーク
-
vswitch-hx-storage-data:ESXi ストレージ インターフェイス (vmk1)、HX ストレージ コントローラ データ ネットワーク。
-
vmotion - VMotion インターフェイス(vmk2)
-
vswitch-hx-vm-networ:VM ゲスト ポート グループ
ネットワーク トポロジ(Network Topology)
フェールオーバーの順序:
-
vswitch-hx-inband-mgmt:vSwitch 全体がアクティブ/スタンバイに設定されます。デフォルトでは、すべてのサービスが 1 つのアップリンク ポートを使用し、必要に応じてフェールオーバーされます。
-
vswitch-hx-storage-data:HyperFlex ストレージ データ ネットワークと vmk1 は、インバンド管理および vmotion vSwitches としての逆のフェールオーバー順序を使用して、トラフィックがロードS バランシングされるようにします。
-
post_install:vMotion VMKernel ポート(vmk2)は post_install スクリプトの使用時に設定されます。フェールオーバーの順序は、アクティブ/スタンバイに設定されます。
-
vswitch-hx-vm-network:vSwitch がアクティブ/アクティブに設定されます。必要に応じて、個々のポート グループを上書きできます。
10 ギガビット イーサネット スイッチ設定時の注意事項
最低でも 3 つの VLAN が必要です。
-
次の条件で 1 VLAN: VMware ESXi 管理、ストレージ コントローラ VM 管理および Cisco IMC 管理。
-
VMware ESXi 管理およびストレージ コントローラ VM 管理は、同じサブネットおよび VLAN に存在する必要があります
-
専用 Cisco IMC 管理ポートは、上記の管理インターフェイスと同じ VLAN を共有できます。または、オプションで専用サブネットおよび VLAN を使用できます。別の VLAN を使用している場合、L3 接続が上記の管理 VLAN に必要です。また、Intersight 接続要件を満たす必要があります。
-
Cisco IMC 管理の共有 LOM 拡張モードを使用する場合は、専用の VLAN が推奨されます。
-
-
Cisco HyperFlex のストレージ トラフィック用 1 VLAN これは、独立した、またはルーティングされていない VLAN である必要があります。固有である必要があり、管理 VLAN と重複することはできません。
-
vMotion トラフィック用 1 VLAN これは、独立した、またはルーティングされていない VLAN にすることができます。
(注)
これらの VLAN の必要性を縮小したり、削除したりすることはできません。このインストールが試行された場合は失敗します。
-
ゲスト VM トラフィックには、追加の VLAN が必要です。これらの VLAN は、ESXi の追加ポートグループとして設定され、ToR スイッチでポートに面する すべての接続をトランクおよび許可する必要があります。
-
これらの追加ゲスト VM VLAN はオプションです。シンプルなネットワーク設計の維持を望む環境では、ゲスト VM トラフィックに上記の同じ管理 VLAN を使用できます。
(注)
Cisco VIC の特性は、同じ物理ポートから複数の vNICs から切り離されているため、同じホスト上で実行されているインターフェイスまたはサービスに L2 で通信するために、vswitch-hx-vm-network 上でゲスト VM トラフィックを設定することはできません。a) 別の VLAN を使用し L3 ルーティングを実行するか、b) 管理インターフェイスへのアクセスが必要なゲスト VM が vswitch-hx-inband-mgmt vSwitch に配置されていることを推奨します。一般に、vm-network vSwitch を除き、ゲスト VM を HyperFlex で設定された vSwitches のいずれにも配置しないでください。使用例としては、いずれかのノードで vCenter を実行する必要があり、実行している ESXi ホストを管理するための接続が必要な場合などがあります。この場合は、上記の推奨事項のいずれかを使用して、接続が中断されないようにします。
-
-
Cisco VIC に接続されているスイッチポートは、パスが許可された適切な VLAN を使用して、トランク モードで設定する必要があります。
-
専用 Cisco IMC 管理ポートに接続されているスイッチポートは、適切な VLAN で「アクセス モード」で設定する必要があります。
-
すべてのクラスタ トラフィックは、10GE トポロジ内の ToR スイッチを通過します。
-
スパニング ツリー PortFast トランク (トランク ポート) は、すべてのネットワーク ポートで有効にする必要があります。
(注)
PortFast の設定に失敗すると、ESXi の起動時に断続的に切断され、物理リンク障害時に必要なネットワークの再コンバージェンスよりも長く時間がかかります。
その他の考慮事項
-
必要に応じて、HX Edge ノードにサードパーティ製の NIC カードをさらにインストールできます。ネットワーク ガイドへのリンクについては、第 1 章の項を参照してください。
-
VIC 以外のすべてのインターフェイスは、インストールが完了するまでシャットダウンするか、ケーブルを切断している必要があります。
-
MLOM スロットでは、HX Edge ノードごとに 1 つの VIC のみがサポートされます。PCIe ベース VIC アダプタは、HX Edge ノードではサポートされていません。
10 ギガビット イーサネットのジャンボ フレーム
通常、ジャンボ フレームは、ネットワーク上で送信されるパケット数を減らし、効率を向上させるために使用されます。以下では、10GE トポロジでジャンボ フレームを使用する際のガイドラインについて説明します。
-
ジャンボ フレームを有効にするオプションは、最初のインストール中にのみ提示され、後で変更することはできません。
-
ジャンボ フレームは不要です。ジャンボ フレームをオプトアウトする場合は、すべてのネットワーク スイッチで MTU を 1500 バイトに設定したままにします。
-
最適なパフォーマンスのために、ジャンボ フレームをオプションで有効にできます。フル パス MTU が 9000 バイト以上であることを確認します。ジャンボ フレームを有効にする場合は、次の点に注意してください。
-
デュアル スイッチ セットアップを実行する場合、すべてのスイッチ インターコネクトおよびスイッチ アップリンクでジャンボ フレームが有効であることが不可欠です。フル パス MTU を確認しないと、リンクまたはスイッチの失敗後、トラフィックのパスが許可されない場合にクラスタがオフになる可能性があります。
-
HyperFlex インストーラは、ノードのいずれかでスタンバイ リンクを使用するため、フェールオーバーを強制する初期展開で、ワンタイム テストを実行します。スイッチのケーブル接続が適切に行われている場合、エンドツーエンド パス MTU をテストします。障害が検出された場合、この警告をバイパスしないでください。問題を修正し、インストーラを再試行して、検証チェックに合格するようにしてください。
-
これらの理由と削除が複雑なため、デュアル スイッチ セットアップを使用する場合はジャンボ フレームを無効にすることをお勧めします。
-
-
ジャンボ フレームを有効にするためのオプションは、ネットワーク設定ポリシーの下の HyperFlex クラスタ プロファイルの下にあります。ボックスをチェックすると、ジャンボ フレームが有効になります。ボックスをチェックしないと、ジャンボ フレームは無効のままになります。
次の手順:
ネットワークの共通要件チェックリストを完了します。
1 ギガビット イーサネット トポロジ
1 ギガビット イーサネット(GE)スイッチ トポロジは、スイッチ(デュアルまたはスタック スイッチを使用している場合)、リンクおよびポートの障害からネットワークを保護する完全冗長設計を提供します。1 GE スイッチは、1 つまたは 2 つのスタンドアロン スイッチとして使用したり、スイッチ スタックの構成に使用したりすることができます。
1 ギガビット イーサネット トポロジ用 Cisco IMC 接続
2 ノード 1 ギガビット イーサネット (GE) トポロジの Cisco IMC 接続では、専用の 1GE Cisco IMC 管理ポートを使用する必要があります。このトポロジで直接接続ケーブルを使用しているため、共有 LOM モードを含む他の動作モードは使用できません。
同様の Cisco UCS C シリーズ サーバについては、『サーバ設置およびサービス ガイド』の次の手順に従い、Cisco IMC に IPv4 管理アドレスを割り当てます。HyperFlex は IPv6 アドレスをサポートしていません。
1 GE トポロジ用物理ネットワークおよびケーブル接続
VLAN 機能を備えたマネージド スイッチ (1 または 2) が必要です。Cisco は、Catalyst および Nexus スイッチング プラットフォームのリファレンス構成を完全にテストし、提供します。これらのスイッチのいずれかを選択すると、最高レベルの互換性が提供され、円滑な展開とシームレスな継続的運用が可能になります。
デュアル スイッチのケーブル接続には、スイッチの障害、リンクの障害、スイッチ ポートの障害から保護する完全な冗長性を備えた、少し複雑なトポロジが含まれます。スタンドアロンまたはスタックの 2 個のスイッチと、サーバごとに 3 個の 1 ギガビット イーサネット (GE) スイッチ ポートが必要です。シングル スイッチのケーブル接続では、サーバごとに 1 台のスイッチと 3 つの 1 GE スイッチ ポートのみを必要とする単純なトポロジが実現します。スイッチ レベルの冗長性は提供されませんが、すべてのリンク/ポートおよび関連するネットワーク サービスは完全に冗長であり、障害を許容することができます。
1GE トポロジは、10GE 用スイッチが必要なく、2 個のノード間の高速、冗長、10GE 接続に直接接続ケーブルを使用します。
(注) |
このトポロジは、今後のノード展開機能はサポートせず、今後さらなる HX Edge ノードの追加を制御する要件が存在する場合、避ける必要があります。 |
次の要件は両方の 1GE トポロジに共通であり、展開を開始する前に満たす必要があります。
-
サーバごとの専用 1 ギガビット イーサネット (GE) Cisco IMC 管理ポート (必須)
-
Intel i350 クアッド ポート PCIe NIC カード (各サーバの PCIe スロットにインストール) (必須)
-
Cisco VIC はこのトポロジでは使用されません
-
-
2 x 10GE DirectConnect LAN-on-Motherboard (LOM) 接続 (スイッチポートを消費しない)
-
直接接続リンクのイーサネット ケーブルを通して 2 x カテゴリ 6 ストレート (顧客提供)
-
-
6 x 1GE Top of Rack (ToR) スイッチポートおよび 6x カテゴリ 6 イーサネット ケーブル (顧客提供)
物理的なケーブル接続を続行するには、シングル スイッチまたはデュアル スイッチの設定を選択します。
1 ギガビット イーサネット デュアル スイッチ ケーブル接続
警告 |
適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。 |
冗長性を追加するためデュアル ToR を使用して展開する場合 (ビジュアル レイアウトについては、次の図を参照してください)。
-
各サーバ (サーバの背面に「M」というラベルが付いている) の 1GE 専用の Cisco IMC を 2 つのスイッチのいずれかに接続します。
-
通常のイーサネット ケーブルを使用して、サーバ上の Lan-on-motherboard (LOM) ポート 1 を別のサーバ上の LOM ポート 1 に接続します。
-
サーバ上の LOM ポート 2 を第二サーバ上の LOM ポート 2 に接続します。
-
i350 NIC の 4 つの 1GE ポートのうち 1 つを、各サーバから同じ ToR スイッチに接続します。同じスイッチに接続するには、各サーバで同じポート番号を使用します。
(注)
同じポート番号を使用しない場合、サーバ間のトラフィックに対して余分なホップが発生し、2 つのスイッチ間で不必要に帯域幅が消費されます。
-
i350 NIC の 2 番目の 1GE ポートを、各サーバからもう一方の ToR スイッチに接続します。同じスイッチに接続するには、各サーバで同じポート番号を使用します。
-
クラスタのインストール前に追加の 1GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 1GE ポートをゲスト VM トラフィックにオプションで使用することができます。
1 ギガビット イーサネット シングル スイッチ ケーブル接続
警告 |
適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。 |
1 個の ToR を使用して展開する場合 (ビジュアル レイアウトについては、次の図を参照してください)。
-
各サーバ (サーバの背面にある「M」というラベルが付いた) の 1GE 専用 Cisco IMC 管理ポートをスイッチに接続します。
-
通常のイーサネット ケーブルを使用して、サーバ上の Lan-on-motherboard (LOM) ポート 1 を別のサーバ上の LOM ポート 1 に接続します。
-
サーバ上の LOM ポート 2 を第二サーバ上の LOM ポート 2 に接続します。
-
i350 NIC の 4 つの 1GE ポートのうち 2 つを、各サーバから同じ ToR スイッチに接続します。
-
クラスタのインストール前に追加の 1GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 1GE ポートをゲスト VM トラフィックにオプションで使用することができます。
2 ノード 1 ギガビット イーサネット トポロジの仮想ネットワーク設計
仮想スイッチ
このセクションでは、仮想ネットワーク セットアップについて説明しています。HyperFlex 展開プロセスにより自動で仮想ネットワークがセットアップされるため、アクションは必要ありません。これらの詳細は、情報およびトラブルシューティング目的で下記に記載されています。
各 ESXi ホストの推奨設定では、次のネットワークを分離する必要があります。
-
管理トラフィック ネットワーク
-
データ トラフィック ネットワーク
-
VMotion ネットワーク
-
VM ネットワーク
最小ネットワーク構成では、最小限で次の 2 つの個別ネットワークが必要です。
-
管理ネットワーク(VMotion と VM ネットワークを含む)
-
データ ネットワーク(ストレージ トラフィック用)
それぞれのネットワークに対応する 2 つの vSwitch が必要です。
-
vswitch-hx-inband-mgmt:ESXi 管理 (vmk0)、HyperFlex ストレージ コントローラ管理、VM ゲスト ポートグループ
-
vswitch-hx-storage-data:ESXi ストレージ インターフェイス (vmk1)、VMotion インターフェイス (vmk2)、HyperFlex ストレージ コントローラ データ ネットワーク。
ネットワーク トポロジ(Network Topology)
フェールオーバーの順序:
vswitch-hx-inband-mgmt:2 つのアップリンク上で、vSwitch 全体がアクティブ/スタンバイに設定されます。デフォルトでは、すべてのサービスが 1 つのアップリンク ポートを使用し、必要に応じてフェールオーバーされます。VM ポートグループのフェールオーバー順序は、必要に応じて、かつより適切なロード バランシングになるようにオーバーライドできます。
vswitch-hx-storage-data:HyperFlex ストレージ データ ネットワークと vmk1 は、同じアクティブ/スタンバイ順序に設定されます。post_install スクリプトを使用して設定されている場合、vMotion VMKernel ポートは反対の順序を使用するように設定されます。これにより、直接接続リンクの完全な使用率が確保されます。
1 ギガビット イーサネット スイッチ設定時の注意事項
-
次の条件で最小の 1 VLAN: VMware ESXi 管理、ストレージ コントローラ VM 管理および Cisco IMC 管理。
-
VMware ESXi 管理およびストレージ コントローラ VM 管理は、同じサブネットおよび VLAN に存在する必要があります
-
専用 Cisco IMC 管理ポートは、上記の管理インターフェイスと同じ VLAN を共有できます。または、オプションで専用サブネットおよび VLAN を使用できます。別の VLAN を使用している場合、L3 接続が上記の管理 VLAN に必要です。また、Intersight 接続要件を満たす必要があります。
-
-
ゲスト VM トラフィックには、追加の VLAN が必要です。これらの VLAN は、ESXi の追加ポートグループとして設定され、すべての接続を ToR スイッチにトランクする必要があります。
-
これらの追加ゲスト VM VLAN はオプションです。シンプルなネットワーク設計の維持を望む環境では、ゲスト VM トラフィックに上記の同じ管理 VLAN を使用できます。
-
-
Intel i350 に接続されているスイッチポートは、パスが許可された適切な VLAN を使用して、トランク モードで設定する必要があります。
-
専用 Cisco IMC 管理ポートに接続されているスイッチポートは、適切な VLAN で「アクセス モード」で設定する必要があります。
-
VMware vMotion トラフィックおよび Cisco HyperFlex データ トラフィックは、直接接続 LOM をトラバースするため、top of rack スイッチを利用しません。したがって、追加の VLAN がこれらのサービスには必要ありません。
-
ToR スイッチのジャンボ フレームの設定は、アップストリーム スイッチをトラバースする必要なく、すべてのトラフィックがローカルに残るためこのトポロジでは必要ありません。したがって、このトポロジはデフォルトで、ジャンボ フレームを使用して高パフォーマンスを実現するトラフィックを vMotion します。
-
-
スパニング ツリー PortFast トランク (トランク ポート) は、すべてのネットワーク ポートで有効にする必要があります。
(注)
PortFast の設定に失敗すると、ESXi の起動時に断続的に切断され、物理リンク障害時に必要なネットワークの再コンバージェンスよりも長く時間がかかります。
1 ギガビット イーサネットのジャンボ フレーム
通常、ジャンボ フレームは、ネットワーク上で転送されるパケット数を減らすために使用されます。以下では、1GE トポロジでジャンボ フレームを使用する際のガイドラインについて説明します。
-
ジャンボ フレームは、追加のセットアップは必要ないため、vMotion ネットワーク上で自動的に設定されます。
-
ジャンボ フレームを有効にするためのオプションは、ネットワーク設定ポリシーの下の HyperFlex クラスタ プロファイルの下にあります。1GE トポロジを使用する場合は、展開を開始する前にチェックボックスが有効になっていることを確認して、ジャンボ フレームを有効にすることができます。
次の手順:
ネットワークの共通要件チェックリストを完了します。