Cisco HyperFlex Edge リリース 4.5 導入ガイド

2 ノードネットワークトポロジの選択

2 ノードトポロジを選択するとき、初期展開時に選択されるネットワークトポロジは、完全な再インストールなしで変更またはアップグレードすることはできないことにご注意ください。将来のニーズを念頭に置いてネットワークトポロジを慎重に選択し、次の Cisco HyperFlex 製品を考慮してください。

Cisco VIC ベースハードウェアまたは Intel NIC ベースアダプタを搭載した 10/25 Gigabit（GE）トポロジ
ノード拡張を必要とせず、トップオブラック（ToR）スイッチに使用可能な 10GE ポートがないクラスタ向けの 1GE トポロジ。

Cisco IMC 接続、物理ケーブル、ネットワーク設計、および構成ガイドラインの詳細については、次の使用可能なトポロジのリストから選択してください。

10 または 25GE VIC ベースのトポロジ
10 または 25GE NIC ベーストポロジ
1 ギガビットイーサネットトポロジ

10/25GE または 1GE ToR 物理ネットワークとケーブルのセクションが完了したら、ネットワークの共通要件チェックリストに進みます。

10 または 25GE VIC ベースのトポロジ

10 または 25 ギガビットイーサネット (GE) スイッチトポロジは、スイッチ (デュアルまたはスタック構成のスイッチを使用している場合)、リンクおよびポートの障害から保護する、フル冗長型のデザインを提供します。10/25GE スイッチは、1 台または 2 台のスタンドアロンスイッチとして、またはスイッチスタック構成で使用することができます。

10/25GE VIC ベーストポロジの Cisco IMC 接続

2 ノード 10/25 ギガビットイーサネット (GE) トポロジに、次の Cisco IMC 接続オプションのいずれかを選択します。

専用の 1GE Cisco IMC 管理ポートを使用することが推奨されます。このオプションには追加のポートとケーブルが必要ですが、ネットワークの競合を防ぎ、各物理サーバへのアウトオブバンドアクセスを常にオンにすることができます。
共有 LOM 拡張モード (EXT) の使用。このモードでは、シングルワイヤ管理が使用され、Cisco IMC トラフィックが 10/25GE VIC 接続に多重化されます。このモードで操作する場合、トラフィックの複数のストリームが同じ物理リンク上で共有され、妨害のない到達可能性は保証されません。この展開オプションは推奨されません。
- ファブリックインターコネクトベース環境では、シングルワイヤ管理を使用する場合、内蔵 QpS により Cisco IMC およびサーバ管理への妨害のないアクセスが保証されます。HyperFlex Edge 環境では、QoS が適用されないため、専用管理ポートの使用が推奨されます。
同様の Cisco UCS C シリーズサーバについては、『サーバ設置およびサービスガイド』の次の手順に従い、Cisco IMC に IPv4 管理アドレスを割り当てます。HyperFlex は IPv6 アドレスをサポートしていません。

10/25GE VIC ベーストポロジ用物理ネットワークおよびケーブル配線

VLAN 機能を備えたマネージドスイッチ (1 または 2) が必要です。Cisco は、Catalyst および Nexus スイッチングプラットフォームのリファレンス構成を完全にテストし、提供します。これらのスイッチのいずれかを選択すると、最高レベルの互換性が提供され、円滑な展開とシームレスな継続的運用が可能になります。

デュアルスイッチの設定には、スイッチの障害、リンクの障害、ポートの障害から保護する完全な冗長性を備えた、少し複雑なトポロジが含まれます。スタンドアロンまたはスタック構成が行われている 2 つのスイッチと、2 つの 10/25GE ポート、CIMC 管理用の 1 つの 1GE ポート、サーバごとに 1 つの Cisco VIC 1457 が必要です。トランクポートは、唯一サポートされているネットワークポート設定です。

シングルスイッチの設定では、サーバごとに 1 台のスイッチ、2 つの 10/25GE ポート、CIMC 管理の 1GE ポート、1 個の Cisco VIC 1457 のみを必要とするシンプルなトポロジが実現します。スイッチレベルの冗長性は提供されませんが、すべてのリンク/ポートおよび関連するネットワークサービスは完全に冗長であり、障害を許容することができます。

10 および 25GE トポロジ両方の要件

次の要件は両方の 10/25GE トポロジに共通であり、展開を開始する前に満たす必要があります。

サーバごとの専用 1 ギガビットイーサネット (GE) Cisco IMC 管理ポート (推奨)
- 専用 Cisco IMC 管理ポート (お客様が提供) 用の 2 個の 1GE ToR スイッチポートと、2 本のカテゴリ 6 イーサネットケーブル
Cisco VIC 1457 (各サーバの MLOM スロットに取り付けられている)
- 旧世代の Cisco VIC ハードウェアは、2 ノードまたは 4 ノードの HX Edge クラスタではサポートされていません。
- 4 個の 10/25GE ToR スイッチポートおよび 4 本の 10/25GE SFP + または SFP28 ケーブル (お客様が提供。選択したケーブルがスイッチモデルと互換性があることを確認します。)
- Cisco VIC 1457 は Cisco HyperFlex リリース 4.0(1a) 以降で 10GE インターフェイスの速度をサポートしています。
- Cisco VIC 1457 は Cisco HyperFlex リリース 4.0(2a) 以降で 25GE インターフェイスの速度をサポートしています。
- Cisco VIC 1457 は 40GE インターネットの速度をサポートしていません。

25GE を使用した HX Edge クラスタの要件

（注）

25GE モードを使用するには、通常、選択したケーブルのタイプと長さに応じて、前方誤り訂正 (FEC) を使用する必要があります。デフォルトでは、VIC 1400 シリーズは CL91 FEC モードで設定されます (Cisco IMC UI で使用可能な場合、FEC モード「auto」は CL91 と同じです)。自動 FEC ネゴシエーションはサポートされません。特定のスイッチでリンクステートをアップにするには、この FEC モードに合わせて手動で設定する必要があります。リンクをアップにするには、スイッチと VIC ポートの両方で FEC モードが一致している必要があります。使用中のスイッチが CL91 をサポートしていない場合、スイッチで使用可能な FEC モードと一致させて、VIC ポートが CL74 を使用するように設定できます。これには、[VIC 設定 (VIC configuration)] タブの [CIMC UI] で、手動で FEC モードを変更する必要があります。HyperFlex Edge の展開は、スイッチと VIC ポートからリンクステートがアップになったと報告されるまで、開始しないでください。CL74 は FC-FEC (ファイアコード) とも呼ばれ、CL91 は RS-FEC (リードソロモン) とも呼ばれています。Cisco IMC GUI を使用して VIC で設定されている FEC モードを変更する方法については、『CISCO UCS C シリーズ Integrated Management Controller リリース 4.1 GUI コンフィギュレーションガイド』を参照してください。

次の手順：

物理的なケーブル接続を続行するには、シングルスイッチまたはデュアルスイッチの設定を選択します。

10/25GE VIC ベースのデュアルスイッチの物理ケーブル配線

警告	適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。

冗長性を追加するためデュアル ToR を使用して展開する場合 (ビジュアルレイアウトについては、次の図を参照してください)。

専用の Cisco IMC を使用している場合は、各サーバ (サーバの背面に「M」というラベルが付いている) の 1GE 管理ポートを 2 つのスイッチのいずれかに接続します。

Cisco VIC の 4 つの 10/25GE ポートのうち 1 個を、各サーバから同じ ToR スイッチに接続します。

同じスイッチに接続するには、各サーバで同じポート番号を使用します。

（注）

同じ VIC ポート番号を使用しない場合、サーバ間のトラフィックに対して余分なホップが発生し、2 つのスイッチ間で不必要に帯域幅が消費されます。

Cisco VIC の 2 番目の 10/25GE ポートを、各サーバからもう一方の ToR スイッチに接続します。同じスイッチに接続するには、各サーバで同じポート番号を使用します。
クラスタのインストール前に追加の 10/25GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 10/25GE ポートをゲスト VM トラフィックにオプションで使用することができます。

10/25GE VIC ベースの単一スイッチの物理ケーブル接続

警告	適切なケーブル配線は、ネットワークの完全な冗長性を確保するために重要です。

1 個の ToR を使用して展開する場合 (ビジュアルレイアウトについては、次の図を参照してください)。

専用の Cisco IMC を使用している場合は、各サーバ (サーバの背面にある「M」というラベルが付いた) の 1GE 管理ポートをスイッチに接続します。
Cisco VIC の 4 つの 10/25GE ポートのうち 2 つを、各サーバから同じ ToR スイッチに接続します。
クラスタのインストール前に追加の 10/25GE ポートを接続しないでください。クラスタ展開後、追加で 2 つの 10/25GE ポートをゲスト VM トラフィックにオプションで使用することができます。

2 ノード 10/25GE VIC ベーストポロジの仮想ネットワーク設計

このセクションでは、仮想ネットワークセットアップについて説明しています。HyperFlex 展開プロセスにより自動で仮想ネットワークがセットアップされるため、アクションは必要ありません。これらの詳細は、情報およびトラブルシューティング目的で下記に記載されています。

仮想スイッチ

vSwitch が 4 つ必要です。

vswitch-hx-inband-mgmt：ESXi 管理（vmk0）、ストレージコントローラ管理ネットワーク
vswitch-hx-storage-data：ESXi ストレージインターフェイス（vmk1）、HX ストレージコントローラデータネットワーク
vmotion—vMotion インターフェイス（vmk2）
vswitch-hx-vm-network：VM ゲストポートグループ

ネットワークトポロジ（Network Topology）

フェールオーバーの順序：

vswitch-hx-inband-mgmt：vSwitch 全体がアクティブ/スタンバイに設定されます。デフォルトでは、すべてのサービスが 1 つのアップリンクポートを使用し、必要に応じてフェールオーバーされます。
vswitch-hx-storage-data：HyperFlex ストレージデータネットワークと vmk1 は、インバンド管理および vmotion vSwitches としての逆のフェールオーバー順序を使用して、トラフィックの負荷分散を行います。
vmotion：vMotion VMKernel ポート（vmk2）は post_install スクリプトの使用時に設定されます。フェールオーバーの順序は、アクティブ/スタンバイに設定されます。
vswitch-hx-vm-network：vSwitch がアクティブ/アクティブに設定されます。必要に応じて、個々のポートグループを上書きできます。

10/25GE VIC ベースのスイッチ構成の注意事項

最低でも 3 つの VLAN が必要です。

次の条件で 1 VLAN: VMware ESXi 管理、ストレージコントローラ VM 管理および Cisco IMC 管理。
- VMware ESXi 管理およびストレージコントローラ VM 管理は、同じサブネットおよび VLAN に存在する必要があります
- 専用 Cisco IMC 管理ポートは、上記の管理インターフェイスと同じ VLAN を共有できます。または、オプションで専用サブネットおよび VLAN を使用できます。別の VLAN を使用している場合、L3 接続が上記の管理 VLAN に必要です。また、Intersight 接続要件を満たす必要があります。
- Cisco IMC 管理の共有 LOM 拡張モードを使用する場合は、専用の VLAN が推奨されます。
Cisco HyperFlex のストレージトラフィック用 1 VLAN これは、独立した、またはルーティングされていない VLAN である必要があります。固有である必要があり、管理 VLAN と重複することはできません。

vMotion トラフィック用 1 VLAN これは、独立した、またはルーティングされていない VLAN にすることができます。

（注）

これらの VLAN の必要性を縮小したり、削除したりすることはできません。このインストールが試行された場合は失敗します。

ゲスト VM トラフィックには、追加の VLAN が必要です。これらの VLAN は、ESXi の追加ポートグループとして設定され、ToR スイッチでポートに面するすべての接続をトランクおよび許可する必要があります。

これらの追加ゲスト VM VLAN はオプションです。シンプルなネットワーク設計の維持を望む環境では、ゲスト VM トラフィックに上記の同じ管理 VLAN を使用できます。

（注）

Cisco VIC の特性は、同じ物理ポートから複数の vNICs から切り離されているため、同じホスト上で実行されているインターフェイスまたはサービスに L2 で通信するために、vswitch-hx-vm-network 上でゲスト VM トラフィックを設定することはできません。a) 別の VLAN を使用し L3 ルーティングを実行するか、b) 管理インターフェイスへのアクセスが必要なゲスト VM が vswitch-hx-inband-mgmt vSwitch に配置されていることを推奨します。一般に、vm-network vSwitch を除き、ゲスト VM を HyperFlex で設定された vSwitches のいずれにも配置しないでください。使用例としては、いずれかのノードで vCenter を実行する必要があり、実行している ESXi ホストを管理するための接続が必要な場合などがあります。この場合は、上記の推奨事項のいずれかを使用して、接続が中断されないようにします。

Cisco VIC に接続されているスイッチポートは、パスが許可された適切な VLAN を使用して、トランクモードで設定する必要があります。
専用 Cisco IMC 管理ポートに接続されているスイッチポートは、適切な VLAN で「アクセスモード」で設定する必要があります。
すべてのクラスタトラフィックは、10/25GE トポロジ内の ToR スイッチを通過します。

スパニングツリー PortFast トランク (トランクポート) は、すべてのネットワークポートで有効にする必要があります。

（注）

PortFast の設定に失敗すると、ESXi の起動時に断続的に切断され、物理リンク障害時に必要なネットワークの再コンバージェンスよりも長く時間がかかります。

その他の考慮事項

必要に応じて、HX Edge ノードにサードパーティ製の NIC カードをさらにインストールできます。ネットワークガイドへのリンクについては、第 1 章の項を参照してください。
VIC 以外のすべてのインターフェイスは、インストールが完了するまでシャットダウンするか、ケーブルを切断している必要があります。
MLOM スロットでは、HX Edge ノードごとに 1 つの VIC のみがサポートされます。PCIe ベース VIC アダプタは、HX Edge ノードではサポートされていません。

10/25 GE VIC ベースのジャンボフレーム

通常、ジャンボフレームは、ネットワーク上で送信されるパケット数を減らし、効率を向上させるために使用されます。以下では、10/25GE トポロジでジャンボフレームを使用する際のガイドラインについて説明します。

ジャンボフレームを有効にするオプションは、最初のインストール中にのみ提示され、後で変更することはできません。
ジャンボフレームは不要です。ジャンボフレームをオプトアウトする場合は、すべてのネットワークスイッチで MTU を 1500 バイトに設定したままにします。
最適なパフォーマンスのために、ジャンボフレームをオプションで有効にできます。フルパス MTU が 9000 バイト以上であることを確認します。ジャンボフレームを有効にする場合は、次の点に注意してください。
- デュアルスイッチセットアップを実行する場合、すべてのスイッチインターコネクトおよびスイッチアップリンクでジャンボフレームが有効であることが不可欠です。フルパス MTU を確認しないと、リンクまたはスイッチの失敗後、トラフィックのパスが許可されない場合にクラスタがオフになる可能性があります。
- HyperFlex インストーラは、ノードのいずれかでスタンバイリンクを使用するため、フェールオーバーを強制する初期展開で、ワンタイムテストを実行します。スイッチのケーブル接続が適切に行われている場合、エンドツーエンドパス MTU をテストします。障害が検出された場合、この警告をバイパスしないでください。問題を修正し、インストーラを再試行して、検証チェックに合格するようにしてください。
- これらの理由と削除が複雑なため、デュアルスイッチセットアップを使用する場合はジャンボフレームを無効にすることをお勧めします。
ジャンボフレームを有効にするためのオプションは、ネットワーク設定ポリシーの下の HyperFlex クラスタプロファイルの下にあります。ボックスをチェックすると、ジャンボフレームが有効になります。ボックスをチェックしないと、ジャンボフレームは無効のままになります。

次の手順：

ネットワークの共通要件チェックリストを完了します。

10 または 25GE NIC ベーストポロジ

10 または 25 ギガビットイーサネット（GE）スイッチ NIC ベーストポロジは、スイッチ（デュアルまたはスタック構成のスイッチを使用している場合）、リンクおよびポートの障害から保護する、フル冗長型のデザインを提供します。10/25 GE スイッチは、1 つまたは 2 つのスタンドアロンスイッチを利用するか、スイッチスタックの構成で利用することができます。

10 または 25 ギガビットイーサネット（GE）ネットワークインターフェイスカード（NIC）ベースのトポロジは、VIC ベースのトポロジに代わるオプションです。NIC または VIC ベーストポロジは、スイッチ (デュアルまたはスタック構成のスイッチを使用している場合)、リンクおよびポートの障害から保護する、フル冗長型のデザインを提供します。10/25 GE スイッチは、1 つまたは 2 つのスタンドアロンスイッチを利用するか、スイッチスタックの構成で利用することができます。NIC ベースのトポロジの展開を検討する前に、次の要件とサポートされるハードウェアを検討してください。

NIC ベースのトポロジの要件

展開を開始する前に、次の要件とハードウェアを考察する必要があります。

NIC ベース展開は HXDP リリース 5.0(2a) 以降でサポートされています
VMware ESXi 7.0 U3 以降
NIC ベースクラスタは、Intersight 展開のみに対してサポートされ、Intersight Essentials ライセンスを必要とします
NIC ベース HX 展開は、HX 220/225/240/245 M6 ノードにのみサポートされます。
エッジと DC-no-FI クラスタのみをサポートします
10/25GE デュアルトップオブラック（ToR）スイッチ
Cisco HX ハードウェアにインストールされた 1 台の Intel 710/810 クアッドポート NIC または 2 台の Intel 710/810 シリーズデュアルポート NIC。サポートされる NIC オプションは以下のとおりです。
- Intel X710-DA2 デュアルポート 10Gb SFP+ NIC（HX-PCIE-ID10GF）
- Intel X710 クワッドポート 10G SFP+ NIC（HX-PCIE-IQ10GF）
- Cisco-Intel E810XXVDA2 2x25/10 GbE SFP28 PCIe NIC（HX-P-I8D25GF）
- Cisco-Intel E810XXVDA4L 4x25/10 GbE SFP28 PCIe NIC（HX-P-I8Q25GF）

10/25GE NIC ベーストポロジの Cisco IMC 接続

2 ノード 10/25 ギガビットイーサネット (GE) トポロジに、次の Cisco IMC 接続オプションのいずれかを選択します。

専用の 1GE Cisco IMC 管理ポートを使用することが推奨されます。このオプションには追加のポートとケーブルが必要ですが、ネットワークの競合を防ぎ、各物理サーバへのアウトオブバンドアクセスを常にオンにすることができます。
共有 LOM 拡張モード (EXT) の使用。このモードでは、シングルワイヤ管理が使用され、Cisco IMC トラフィックが 10/25GE VIC 接続に多重化されます。このモードで操作する場合、トラフィックの複数のストリームが同じ物理リンク上で共有され、妨害のない到達可能性は保証されません。この展開オプションは推奨されません。
同様の Cisco UCS C シリーズサーバについては、『サーバ設置およびサービスガイド』の次の手順に従い、Cisco IMC に IPv4 管理アドレスを割り当てます。HyperFlex は IPv6 アドレスをサポートしていません。

10/25GE NIC ベーストポロジ用物理ネットワークおよびケーブル配線

VLAN 機能を備えた 2 つのマネージドスイッチが必要です。Cisco は、Catalyst および Nexus スイッチングプラットフォームのリファレンス構成を完全にテストし、提供します。これらのスイッチのいずれかを選択すると、最高レベルの互換性が提供され、円滑な展開とシームレスな継続的運用が可能になります。

デュアルスイッチの設定には、スイッチの障害、リンクの障害、ポートの障害から保護する完全な冗長性を備えた、少し複雑なトポロジが含まれます。スタンドアロンまたはスタック構成が行われている 2 つのスイッチと、2 つの 10/25GE ポート、CIMC 管理用の 1GE ポート、サーバごとに 1 個のクワッドポートまたは2 個のデュアルポート NIC が必要です。トランクポートは、特定のサポートされているネットワークポート設定です。