cisco ucs とvmware esxi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... ·...

36
テクニカルマーケティングソリューションガイド ニンブルストレージ SmartStack 入門ガイド Cisco UCS VMware ESXi5

Upload: nguyenquynh

Post on 03-Aug-2018

227 views

Category:

Documents


1 download

TRANSCRIPT

Page 1: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

テクニカルマーケティングソリューションガイド

ニンブルストレージ SmartStack

入門ガイド

Cisco UCSと VMware ESXi5

Page 2: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 2

改訂履歴

日付 リビジョン 説明(著者)

2014/5/16 1.0 ドラフトリリース(mmclaughlin)

2014/5/19 1.1 公開バージョン 1(mmclaughlin)

この技術レポートは情報提供のみを目的としており、誤植や技術的に不正確な記述が含まれることがあ

ります。内容は現状通りとし、明示的および暗黙的な保証は一切ありません。

Nimble Storage:All rights reserved.ニンブルストレージ社の明示的な書面による許可なく本資料をいか

なる方法でも複製することは、固く禁じられています。

Page 3: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 3

目次 改訂履歴 .............................................................................................................................................................................................................................. 2 目次 ..................................................................................................................................................................................................................................... 3

対象読者 ............................................................................................................................................................... 5

前提条件 ............................................................................................................................................................... 5

制限とその他の考慮事項 .................................................................................................................................... 5

UCSトポロジーのレビュー ............................................................................................................................................... 6

ファブリックインターコネクトのみを使う設定 ............................................................................................. 7

Nexusアクセスレイヤースイッチ設定(オプション)................................................................................... 8

基本的なポリシーと UCSMの設定 ................................................................................................................................... 9

ジャンボフレーム ............................................................................................................................................... 9

QoSシステムクラス ............................................................................................................................................ 9

LANポリシー ..................................................................................................................................................... 10

フローコントロールの設定 .............................................................................................................................. 10

ネットワークコントロールポリシー ............................................................................................................... 11

QoSの設定 ......................................................................................................................................................... 11

アプライアンスネットワークコントロールポリシー ................................................................................... 12

アプライアンス VLAN ........................................................................................................................................ 12

アプライアンスポートの設定 ......................................................................................................................................... 14

UCSMサービスプロファイルの設定 .............................................................................................................................. 16

vNIC ..................................................................................................................................................................... 16

SANからのブート– iSCSI BFS – 基本設定 ........................................................................................................................ 18

ディスクおよびブートポリシー定義 ............................................................................................................... 18

ニンブルストレージの接続 ............................................................................................................................................. 22

ネットワークの配線 .......................................................................................................................................... 23

ジャンボフレーム ............................................................................................................................................. 23

サブネットの定義 ............................................................................................................................................. 23

ニンブルストレージポリシー .......................................................................................................................... 24

SANからのブート詳細 .................................................................................................................................................... 27

IQNおよび iSCSI検出 IPの設定 ........................................................................................................................ 27

ニンブルストレージからのブート – 基本手順 .......................................................................................... 28

ホスト OSに関する考慮事項– VMware ESXi5 ................................................................................................................. 31

ESXi 5.x ................................................................................................................................................................. 31

デバイスドライバー、ネットワーク設定、MPIO .......................................................................................... 31

ネットワーク設定 .............................................................................................................................................. 33

まとめ .............................................................................................................................................................................. 36

Page 4: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 4

図一覧 図 1 – EQUIPMENT(機器)タブ FI 操作モード ............................................................................................... 6

図 2 – SMARTSTACK 基本ネットワーク接続 ..................................................................................................... 7

図 3 – LAN QOS システムクラス ...................................................................................................................... 8

図 4 – LAN ポリシー ....................................................................................................................................... 9

図 5 – フローコントロールポリシー............................................................................................................ 10

図 6 – サービスプロファイルネットワークコントロールポリシー ............................................................. 10

図 7 – QOS ポリシー ..................................................................................................................................... 11

図 8 – アプライアンスネットワークコントロールポリシー ........................................................................ 11

図 9 – アプライアンス VLAN ........................................................................................................................ 12

図 10 – アプライアンスポートの設定 .......................................................................................................... 12

図 11 – インターフェース表示 - アプライアンスポート ............................................................................ 13

図 12 – サービスプロファイルプロパティ................................................................................................... 14

図 13 – ISCSI の VNIC プロパティ ................................................................................................................... 15

図 14 – ディスクおよびブートポリシー ...................................................................................................... 16

図 15 – アダプターポリシー ........................................................................................................................ 17

図 16 – ブートポリシー ............................................................................................................................... 17

図 17 – ローカルディスク設定ポリシー ...................................................................................................... 18

図 18 - ISCSI ブート VNIC オーバーレイ ......................................................................................................... 19

図 19 - ISCSI VNIC オーバーレイの詳細 .......................................................................................................... 19

図 20 – ブート順詳細 ................................................................................................................................... 20

図 21 – ニンブルストレージへのジャンボフレームの設定 ......................................................................... 21

図 22 – ニンブルストレージインターフェース設定 .................................................................................... 22

図 23 – ISCSI ブートパフォーマンスポリシー ............................................................................................... 22

図 24 – UCS IQN ブートパラメーター詳細 ..................................................................................................... 23

図 25 – ニンブルイニシエーターグループ定義 ........................................................................................... 24

図 26 – ISCSI ブート用のニンブルボリューム ............................................................................................... 24

図 27 – ニンブルからの UCS ブートパラメーター詳細 ................................................................................ 25

図 28 – ニンブル ISCSI 検出 IP ...................................................................................................................... 26

図 29 – ブート時に検出されたニンブル ...................................................................................................... 26

図 30 – ISCSI ブート LUN が接続されている .................................................................................................. 27

図 31 – KVM が ESX ISO をホストに接続 ........................................................................................................ 27

図 32 – ESX インストーラー .......................................................................................................................... 27

図 33 – ニンブルブートデバイスの選択 ...................................................................................................... 28

図 34 – ESX ネットワーク設定 ...................................................................................................................... 30

図 35 – ESX ISCSI イニシエータープロパティ ................................................................................................ 31

図 36 – ESX ISCSI 全般プロパティ .................................................................................................................. 31

図 37 – ESX ISCSI NIC チーミング .................................................................................................................... 32

図 38 – ESX ISCSI パスと PSP .......................................................................................................................... 33

Page 5: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 5

概要

ニンブルストレージ SmartStack は、仮想化のための統合型インフラストラクチャーの実装例で、スト

レージ、ネットワーク、サーバー、およびハイパーバイザーの基本コンポーネントの上に構築されま

す。基本環境を構築した後は、読者の環境に合わせて具体的な仮想化インフラストラクチャーを使用

できます。

対象読者

この入門ガイドは、新たな SmartStack 管理者が、ニンブルストレージ、Cisco UCS、および VMware

ESXi5環境を、ニンブルストレージ SmartStack ソリューションの多くで定義されているように、迅

速に設定するのを支援するために作られました。

実装やカスタマイズの完全なガイドではありません。方法やパラメータの選択が可能な場合には、そ

の分野に該当する最適な方法や推奨する方法を示しています。

ご不明な点がある場合は、ニンブルストレージ、Cisco Systems、または VMwareのテクニカルサポート

までおたずねください。

このガイドは、ニンブルストレージ UCS SmartStack ソリューションの設定の経験のない管理者およ

び設計者向けです。リファレンスアーキテクチャー型の導入に関する基本的な設定手順と重要な考慮

事項をカバーしています。

前提条件

Cisco UCSおよびUCSMの一般的な知識を有していること– UCS環境の設定方法のチュートリア

ルではありません。

ニンブルストレージの UIおよび基本的な設定タスクを理解していること

VMware ESXi5の基本的な設定を理解していること

このガイドは、Cisco UCSMで考えられるすべての設定オプション(プールやポリシーなど)を

網羅するわけではありません。設定がニンブルストレージソリューションの操作に影響する場合

は、詳細、オプション、および推奨事項を示しています。

これは「ハウツー」ガイドではありません。設定を順を追って説明することはしません。このガイ

ドで概説されるスクリーンショットと設定の例を活用し、適切な手順を実施して下さい。

制限とその他の考慮事項

段階的なガイドではないので、設定の詳細が省略されている場合があります(デフォルト設定の変更や

クリックするだけの単純な手順など)。このガイドの内容の適用に問題がある場合は、ニンブルストレ

ージにお問い合わせください。

Page 6: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 6

UCSトポロジーのレビュー このガイドは、UCSを導入するための SmartStack 構築手引きに基づいています。他の UCSネットワ

ークトポロジーも可能です。特に注意すべき点は、単独の iSCSIサブネットが必要なのか、ネットワ

ークの多様性のためにデュアルサブネットが必要かの決定です。ニンブルストレージを Cisco UCSシ

ステムに接続するには、次の 2つの基本的な方法のいずれかを使用できます。

アプライアンスポート ストレージコンポーネントとして直接ファブリックインターコネクト(FI)ポ

ートに接続。

または、

汎用 iSCSIストレージシステムとしてアクセスレイヤースイッチ(Cisco Nexus 5000 シリーズなど)

に接続。

ニンブルストレージの SmartStack ソリューションはファブリックインターコネクトトポロジーに基

づいています。この入門ガイドは、iSCSIストレージを Cisco UCS環境に接続するための様々なシナ

リオおよびオプションをすべてカバーすることは意図していません。SmartStack の設定に焦点を当て

ています。この後のセクションで 2つの選択における考慮事項について説明します。汎用の接続性の

詳細は、Cisco UCSソリューションチームにご相談ください。

UCS操作モードにより、ファブリックインターコネクトがネットワークトラフィックを転送する方法

が決まります。ここでは、イーサネット操作モードのみを扱います。イーサネットエンドホストモー

ドはもっとも一般的な設定で、SmartStack 設定で一般的に使用されます。現在のモードを確認するに

は、UCSM GUIから以下の手順を実行します。

Equipment(機器)タブに移動します。

Fabric Interconnect セクションを開きます。

ファブリックインターコネクトを 1つ選択し、General(一般)タブで詳細を確認します。以下の

ようなに表示されます。

図 1 – Equipment(機器)タブ FI操作モード

Page 7: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 7

ファブリックインターコネクトのみを使う設定

この設定では、ニンブルストレージは Cisco UCSファブリックインターコネクト FI(UPN-6248)デ

バイスのユニファイド 10G ポートに直接接続します。この方法は直接接続の例であり、UCSサーバ

ー(ブレードまたはラックシリーズ)とニンブルストレージをもっとも接近させた接続方法を示しま

す。この構成は、Ciscoとニンブルの間で特殊なテストと認定を必要とするものです。従いまして、

すべての CASLと Cisco UCSのバージョンがサポートされていることを確認してください。これは

ホストを実稼働で使用する前にチェックしなければなりません。対象のニンブルストレージが、Cisco

UCSで機能することが認定され、SANブート用にサポートされている最新の GAリリースを実行し

ていることを確認してください。

Cisco UCS側からこの情報を正式に確認するには、下記の Cisco UCSハードウェアおよびソフトウェ

ア相互運用性マトリックスを参照してください。

http://www.cisco.com/web/techdoc/ucs/interoperability/matrix/matrix.html

このケースでは、ニンブルストレージは Ciscoファブリックインターコネクト(FI)にアプライアン

スポートとして直接接続します。アプライアンスポートとは、本質的には、UCS環境内の特定の VLAN

に向かうタグなしのトラフィックです。次ページの図の通り、各ニンブルコントローラーは一方のイ

ンターフェースを使用して FI-Aに、他方を使用して FI-Bに接続します(たとえば、両方のコントロ

ーラーからの tg1接続は FI-Aに、tg2は FI-Bに)。また、iSCSI接続用に 2つの独立した VLAN(お

よび関連するサブネット)が必要です。一方の VLANは FI-A専用で、他方は FI-B専用です。VLAN

は単独の FIのみに存在する必要があり、FI間のフェイルオーバーは許可されません。また、各 UCS

ブレードサーバープロファイルが、各 iSCSI VLANに存在する必要があります。これは、特定の vNIC

を作成して、以前に作成した各 iSCSI VLANのネイティブ VLANをそれに割り当てることで実現でき

ます。ホスト OSは、これらのサブネットに IPがあり、これらのパスを経由して MPIO 接続を管理し

ます。

接続は、SFP+コネクタとケーブルが Ciscoとニンブルストレージでサポートされていれば、10G

Twinax ケーブルまたは 10G 光ケーブルのどちらでも構いません。

現在の UCSMファブリックインターコネクトのアーキテクチャーでは、データパスを二重化する

iSCSIネットワークトポロジー(1つのサブネットは FI-A、もう 1つのサブネットは FI-Bを経由)の

結果としてこの構成になります。

Page 8: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 8

図 2 – SmartStack 基本ネットワーク接続

Nexusアクセスレイヤースイッチ設定(オプション)

ニンブルストレージアプライアンスに汎用アクセスレイヤースイッチ(Cisco Nexus 5000など)を接

続し、それを UCS FI スイッチに接続することも可能です。この方法は適切に設定すれば問題なく機能

します。ただし、SmartStack UCSに関して通常指定される方法ではありません。

この設定では、ニンブルストレージは UCS環境では基本的な iSCSIストレージアプライアンスとして

認識され、UCSM環境の他の iSCSIストレージと同様に設定できます。特別な認定は不要です。ただ

し、追加のアクセスレイヤースイッチが必要になり、そのためコストが増加しスイッチ設定が複雑に

なります。この複雑さには、VLANタグ付け、QoS、および MTU設定などに関する追加の考慮事項が

あります。

このアプローチでは、必要に応じて Cisco以外のホストをアクセスレイヤースイッチに接続すること

も可能です。

この場合における設定の詳細は、Cisco UCSソリューションチームにご相談ください。

Page 9: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 9

基本的なポリシーと UCSMの設定

ストレージ、アプライアンスポート、またはサービスプロファイルを設定する前に、予め設定してお

くとよい基本的なポリシーと UCSM設定がいくつかあります。

ジャンボフレーム

ジャンボフレーム機能を適切に使用するために、システム構成全体を通して一貫した値に設定されて

いることを確認する必要があります。この SmartStack 設定では、一般的な MTU値である 9000を全

体を通して使用しています。これには以下が含まれます。

ニンブルストレージ

QoSシステムクラス

サービスプロファイル vNIC定義

ホスト/ハイパーバイザーの物理ネットワークと仮想ネットワークの設定

仮想マシン NIC設定

QoSシステムクラス

LAN Cloud(LANクラウド)の下の LANタブに、QoS System Class(QoSシステムクラス)があ

ります。これらのエントリーの 1つが、iSCSIデータトラフィック用に選択されている必要がありま

す。このベストプラクティスの設定では、ニンブルストレージ iSCSIの考慮事項のみを取り扱います。

FCデバイスや、その他のタイプの UCS FIネットワークを通るネットワークトラフィックや UCS FI

ネットワーク内のネットワークトラフィックなどの、その他の要素も考慮して選択する必要がありま

す。

図 3 – LAN QoSシステムクラス

使用する選択肢(この場合は Platinum)について、Packet Drop(パケットドロップ)が選択されてい

ないこと、ジャンボフレームの MTUが 9000に設定されていること、広帯域幅の iSCSIトラフィック

をサポートするためウエイトの値を大きく(つまり適切に設定)していることを確認してください。

今回の構成では、FCの接続がないため、ウエイトは 70%を少し超えるように大きくします。選択した

ポリシーを有効にします。

Page 10: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 10

LANポリシー

Root Level(ルートレベル)定義の下の Policies(ポリシー)の下の LANタブに、以下のように重要

な設定項目、フローコントロール、ネットワークコントロール、および QoSがあります。

図 4 – LANポリシー

フローコントロールの設定

アプライアンスポートプロパティに使用するフローコントロールポリシーを作成します。以下の例は

「FlowControlOn」と呼ばれ、Receive/Send(送受信の値)を Onに設定します。

図 5 – フローコントロールポリシ

Page 11: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 11

ネットワークコントロールポリシー

FIアップリンクが失われた場合に、vNICの障害時リンクダウンを無効にするネットワークコントロー

ルポリシーを定義します。この例は「AppModeNCP」と呼ばれます。Action on Uplink Fail(アップリ

ンク障害時のアクション)をWarning(警告)に設定します。

図 6 – サービスプロファイルネットワークコントロールポリシー

QoSの設定

vNIC定義に使用する QoSポリシーを定義します。今回の構成では、上述の QoSシステムクラス選択

から「Platinum」を使用します。

図 7 – QoSポリシー

Page 12: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 12

アプライアンスネットワークコントロールポリシー

FIアップリンクが失われた場合に、アプライアンスポートが vNICの障害時リンクダウンを無効にするネ

ットワークコントロールポリシーを定義することも重要です。この例は「AppNCP」と呼ばれます。Action

on Uplink Fail(アップリンク障害時のアクション)を Warning(警告)に設定します。

図 8 – アプライアンスネットワークコントロールポリシー

アプライアンス VLAN

LANタブでの最後の設定は、2つの FI(Aと B)の間の iSCSIトラフィックを分離するために使用され

る VLAN定義です。この設定では、「iSCSI-A」と「iSCSI-B」という VLANを定義して固有の VLAN ID

を割り当て、このガイドの他のネットワーク設定定義のトラフィックを分離します。これはデュアルフ

ァブリック VLANとして定義したり、または各ファブリックで独立して定義したりできます。このガイ

ドを簡潔にするため、独立した定義を上位で統合する設定にしました。

Page 13: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 13

図 9 – アプライアンス VLAN

Page 14: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 14

アプライアンスポートの設定

このセクションでは、ニンブルストレージとの接続をサポートするようにアプライアンスポートを設定しま

す。

UCSMで、Equipment タブ(機器ビュー) -> Equipment(機器) -> Fabric Interconnects(ファブリ

ックインターコネクト) -> Fabric Interconnect A(ファブリックインターコネクト A) -> Fixed Module

or Expansion Module 2(固定モジュールまたは拡張モジュール 2) -> Ethernet Ports(イーサネット

ポート)に移動します。

図 10 – アプライアンスポートの設

ここから、ニンブルストレージを接続するポートを選択し、Port #(ポート番号) -> Configure as

Appliance Port(アプライアンスポートとして設定)を選択します。

上記の設定定義から、以下の属性と選択項目を設定します。

Priority = Platinum

Network Control Policy = <名前> (例 = AppNCP)

Flow Control Policy = <名前> (例 FlowControlOn)

Admin Speed = 10Gbps

Port Mode = Trunk

VLANを選択してネイティブ VLAN(–この場合「iSCSI-A」)を選択

Page 15: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 15

Show Navigator(ナビゲーターを表示)ビューが以下のようになります。

図 11 – インターフェース表示 - アプライアンスポート

Page 16: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 16

UCSMサービスプロファイルの設定

基本的な UCSMポリシーの設定、ニンブルストレージの接続、アプライアンスポートの定義が完了し

たら、設定する ESXi5ホストのサービスプロファイルを定義できます。このセクションでは、

SmartStack ソリューションとしてニンブルストレージを接続する際の主な項目を説明します。最初の

手順は適切なサービスプロファイルを作成することです。既存のプロファイルのコピーから作業する

か新規に作成します。このガイドのアプローチでは、この時点では UCSMのプロファイル更新機能は

利用しません。

vNIC

SmartStack 設定では、通常サービスプロファイルに数個の vNICを定義します。これらは、ホストへ

の管理接続、ホストクラスター間のトラフィック、ホスト間およびホストからの VMトラフィック、

および特にニンブルストレージに関して FIを経由するアレイへの iSCSI接続に使われます。iSCSI 用

の vNICは、上記で定義した FIアプライアンス VLANに対して 1つずつ独立して設定します。

図 12 – サービスプロファイルプロパティ

Page 17: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 17

具体的な iSCSI vNIC を以下に示します。以下の主要な設定に注意してください。

Fabric ID(ファブリック ID)

MTU

Adapter Policy(アダプターポリシー)

QoS Policy(QoSポリシー)

Network Control Policy(ネットワークコントロールポリシー)

図 13 – iSCSIの vNICプロパティ

Page 18: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 18

SANからのブート– iSCSI BFS – 基本設定

ディスクおよびブートポリシー定義

ニンブルストレージ SANから iSCSIブートする設定の前に、サービスプロファイルで使用する基本

的な UCSMポリシーを定義します。これには、iSCSIアダプター、ブートおよびローカルディスクポ

リシー定義が含まれます。以下に例を示します。

図 14 – ディスクおよびブートポリシー

Page 19: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 19

アダプターポリシーの例

図 15 – アダプターポリシー

ブートポリシーの例

図 16 – ブートポリシー

Page 20: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 20

ローカルディスク設定ポリシーの例

図 17 – ローカルディスク設定ポリシー

SmartStack 設定では、ニンブルストレージシステムから iSCSIブートを行います。そのためには、以

下に示すように iSCSI vNIC を通常の vNICにオーバーレイさせます。iSCSIブートパラメーター詳細

を、メインのサービスプロファイル定義の Boot Order(ブート順)タブから設定する必要があります。

例を以下に示します。ニンブルストレージボリュームをサービスプロファイルに接続する手順の途中で、

このパネルに戻る必要があります。

Page 21: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 21

図 18 - iSCSIブート vNICオーバーレイ

図 19 - iSCSI vNIC オーバーレイの詳細

Page 22: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 22

図 20 – ブート順詳細

ニンブルストレージの接続

SmartStack UCS構成では、ニンブルストレージは FIスイッチに接続されます。各コントローラーか

らの最初の 10Gポート(TG1)は FI-Aに接続され、各コントローラーからの 2番目の 10Gポート(TG2)

は FI-Bに接続されます。

今回の構成では、ニンブルストレージコントローラーのフェイルオーバーは、MPIO に対して常に 2

つのパスをもちます。1つは FI-A、もう 1つは FI-Bを経由します。また、この設定では、UCSサー

バーからニンブルストレージに少なくとも 1つのアクティブなパスが常に存在するため、どのネット

ワークコンポーネント(NIC、ケーブル、または FI)が障害を起こしてもそれをカバーでき、データ

パスの損失が発生しません。

Page 23: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 23

ネットワークの配線

データポート – 上記の説明と図 2– SmartStack基本ネットワーク接続に従って、ニンブルストレージ

の 10G(TG1および TG2)NICポートを、FIポートに接続します。

管理ポート – マザーボードの 1GbE(eth1および eth2)NICポートを、UCSに接続されている他の

デバイスが使用するのと同じ管理ネットワークに接続します。注意 – これらのポートは、適切な GbE

SFPモジュールを備えた FIに接続することも可能ですが、このソリューションはテストされていま

せん。

iSCSIデータトラフィックに使用される 10G ポートから管理機能を実行することも可能ですが、これ

はテストされておらず、通常は推奨されません。

ジャンボフレーム

今回の設定では、iSCSIデータ接続に関して 10Gネットワーキングおよびジャンボフレームの使用を

前提としています。iSCSI トラフィックに使用されるデータポートを、ジャンボフレームを使用する

ように設定します。今回の設定では、MTU=9000を全設定箇所にわたって使用します。システム構成

全体で一貫してジャンボフレームプロパティを設定することが重要です。

ネットワークインターフェース MTUを設定するには、ニンブルストレージ管理 UIを開き、Administration

(管理) -> Network Configuration(ネットワーク設定)に移動します。次に Active Settings(アクティブ

設定)を選択して Subnets(サブネット)タブを選択します。必要に応じて、iSCSIデータネットワークに

関連するサブネットを編集します。以下の例では、サブネット iSCSI-Aと iSCSI- Bは 9000のジャンボ MTU

を使用するように設定されています。

図 21 – ニンブルストレージへのジャンボフレームの設定

サブネットの定義

ニンブルストレージ 2.1以降では、様々なタイプのトラフィックに対してサブネットを定義し、定義し

たサブネットに NICを関連付けることができます。今回の UCS SmartStack 設定で、ファブリックイ

ンターコネクトに対して 2つの独立したデータサブネットと、管理アレイ UIネットワーク用に追加の

サブネットを定義します。図 21 – ニンブルストレージへのジャンボフレームの設定に示すように、デ

ータのみのトラフィックと、iSCSIおよびグループトラフィックをサポートするために、2つのサブネ

ット(iSCSI-Aと iSCSI-B)を定義しました。これらは、このガイドで後述する FI-Aと FI-Bに対応し

ます。これらのサブネットは、単独の IPアドレスゾーンとジャンボ MTU用に設定されています。こ

の例では、サブネットは 172.17.127.0/24と 172.18.128.0/24 です。

Page 24: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 24

iSCSI Discovery IPアドレスを、これらの各サブネット上で定義することが重要です。これは、ホス

トを実際のニンブルデータポートに接続するために使用されます。データポート IPは、以下のように

Interfaces(インターフェース)タブで定義します。

図 22 – ニンブルストレージインターフェース設定

ニンブルストレージポリシー

以下の設定手順は、ニンブルストレージ設定をより容易に管理できるように、サブポリシーや設定オ

プションを定義するのに役立ちます。

まず、特に iSCSIブートボリュームに対してパフォーマンスポリシーを定義します。ここでは、この設

定にはデフォルト設定を使用します。全体の設定の中でパフォーマンスポリシーの違いがニンブルのボ

リュームの性質の違いを決める項目の一つです。

図 23 – iSCSIブートパフォーマンスポリシー

Page 25: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 25

前に作成した新しいサービスプロファイルのインスタンスに関連付けるイニシエーターグループを

定義します。イニシエーターグループは、ホストからのアクセスを制御する方法を提供します。この

定義では、このボリュームに接続しようとしているサービスプロファイルの IQNが必要です。UCS

サービスプロファイル IQNは、以下のように iSCSI Boot Parameters details(iSCSI Boot Parameters

詳細)ビューから取得できます。また、iSCSIネットワーク接続のホスト側 IPアドレスもここで設定

できます。ここでは静的 IP割り当てを使用します。IQと NIP割り当ての UCSM ポリシーベースの方

法はこのガイドでは扱いません。このようなその他の設定オプションの詳細、ガイダンス、およびオ

プションは、UCSの専門家にご相談ください。今回の設定では、ニンブルイニシエーターグループ定

義で使用するサービスプロファイルに割り当てられた IQNイニシエーター名をコピーします。図 20 –

ブート順詳細に示すように、Aと Bの両方のインターフェースの IQNイニシエーター名を取得します。

図 24 – UCS IQNブートパラメーター詳細

Page 26: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 26

図 25 – ニンブルイニシエーターグループ定義

iSCSIブート用のニンブルボリュームを作成します。この例では、ボリュームを「iBoot-ESXi5-6」と名

付けます。このボリュームはサイズが 200 GB(デフォルトでシンプロビジョニング)で、このセクシ

ョンで作成した ESXi5-6イニシエーターグループおよび iSCSIブートパフォーマンスポリシーに割り

当てられます。また、この時点では保護(スナップショットまたはレプリケーション)はなしとしま

す。

図 26 – iSCSIブート用のニンブルボリューム

Page 27: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 27

SANからのブート詳細

IQNおよび iSCSI検出 IPの設定

ニンブルブートボリュームの IQNを取得するには、CLIにログインして以下のコマンドを実行する必

要があります(注意:サンプルボリュームの名前は「iBoot-ESXi5-6」です)。

次に、上記で取得されたこの IQNを、設定するサービスプロファイルの iSCSIブートパラメーター詳

細にコピーする必要があります。以下に示すように、ニンブルから IQNを iSCSI Target Name(iSCSI

ターゲット名)に、iSCSI Discovery IPを IPv4 Address(IPv4アドレス)フィールドにペーストしま

す。

図 27 – ニンブルからの UCSブートパラメーター詳細

上記で必要な iSCSI Discovery IPは、ニンブルの UIから Administration(管理) -> Network page(ネ

ットワークページ)で簡単に取得できます。

vol --info iBoot-ESXi5-6 | grep "iSCSI target"

iSCSI target: iqn. 2007-11. com. nimblestorage:iboot-esxi5-6-v730bccdab71a8923. 0000039a.

c41145f9

Page 28: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 28

図 28 – ニンブル iSCSI検出 IP

ニンブルストレージからのブート – 基本手順

ニンブルが UCSMブート設定 iSCSIレベルで検出されることを確認します。KVMコンソールに以下の

ようなメッセージが表示されます。

図 29 – ブート時に検出されたニンブル

Page 29: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 29

以下に示すように、ニンブルストレージ UIにも、サービスプロファイル IQNに一致するイニシエー

ターが接続されていることが示されます。

図 30 – iSCSIブート LUNが接続されている

UCSM KVMから、適切な ESXi5 ISO イメージを接続してインストールできます。

図 31 – KVMが ESX ISO をホストに接続

リセット時に、ESX インストーラーが表示されます。

図 32 – ESX インストーラー

Page 30: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 30

次に、以下に示すように、ニンブル LUNがインストールターゲットデバイスのオプションとして検出

されます。ニンブルストレージデバイスを選択してインストールを続行します。

図 33 – ニンブルブートデバイスの選択

Page 31: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 31

ホスト OSに関する考慮事項– VMware ESXi5

ESXi 5.x

ESXi5ホストのセットアップの詳細は、このガイドでは扱いません。SmartStack アプローチでとって

いる主な手順は以下のとおりです。

ESXi5をニンブルストレージ iSCSIブートボリュームにインストールする。

ホストをオンラインにし、環境に合わせて基本的な管理ネットワークセットアップ手順を実行す

る。通常、これには管理 IPの設定と SSH/CLIアクセスを有効にすることが含まれます。

この後の設定のために、ホストを既存の Virtual Center 設定に参加させる。一貫性を保つため、標

準化手順の大半で、VMware ホストプロファイルを利用します。この手順の重要な結果の 1 つは、

UCS FI接続アーキテクチャーを利用する 2つの iSCSIネットワークのネットワーキング設定を定

義することです。これについては、後ほど詳しく説明します。

ニンブルストレージで MPIO を最適化するため、ニンブル接続マネージャー(NCM)をインス

トールします。このセットアップは後ほど詳しく説明します。

基本的なストレージ、ネットワーク、およびハイパーバイザーホスト設定を検証します。

デバイスドライバー、ネットワーク設定、MPIO

ニンブルストレージ NCM(ニンブル・コネクション・マネージャー)を VMware用に設定するため

に、まず適切な NCMバージョンをダウンロードしてアレイに接続します。今回の設定では、ニンブ

ルソフトウェアバージョン 2.1を使用しています。VMware Integration Guide(VMware 統合ガイド)

もダウンロードします。これは、VMwareのニンブルストレージのサポートの様々な側面について説

明する便利なガイドです。

NCMソフトウェアをニンブルストレージ InfoSight からダウンロードしたら、設定した ESXi5ホスト

に転送します。/tmpなどの場所に置きます。

ソフトウェアをインストールするには、新しくプロビジョンされた ESXi5ホストをメンテナンスモ

ードにする必要があります。これは、Virtual Center から、または CLIから以下のコマンドで実行で

きます。

これができたら、次に以下のコマンドで NCMをインストールします(異なるバージョンをダウン

ロードした場合や、/tmp以外の場所に置いた場合は、実際のパスに変更してください)。

# vim-cmd hostsvc/maintenance_mode_enter

# esxcli software vib install -d /tmp/ncm_2-1-0-0_nimble-ncm-2. 1. 0-500006. zip --no-sig-check

Page 32: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 32

結果は以下のようになります。

以下のコマンドでインストールの結果をチェックできます。

Installation Result

Message: Operation finished successfully.

Reboot Required: false

VIBs Installed: Nimble_bootbank_nimble-ncs_2. 1. 0-500006, Nimble_bootbank_nimble-psp_2. 1. 0-

500006

VIBs Removed:

VIBs Skipped:

# esxcli software vib list | grep nimble

nimble-ncs

2013-12-06

2. 0. 4-500110 Nimble VMwareAccepted

nimble-psp

2013-12-06

2. 0. 4-500110 Nimble VMwareAccepted

# esxcli storage nmp psp list

Name Description

------------------- ------------------------------------

NIMBLE_PSP_DIRECTED Nimble Storage Path Selection Plugin

VMW_PSP_MRU

VMW_PSP_RR

Most Recently Used Path Selection

Round Robin Path Selection

VMW_PSP_FIXED Fixed Path Selection

# esxcli storage nmp device list

eui. c93a31e1f3b4edf76c9ce9002f3db6f5

Device Display Name: Nimble iSCSI Disk (eui. c93a31e1f3b4edf76c9ce9002f3db6f5)

Storage Array Type: VMW_SATP_ALUA

Storage Array Type Device Config: {implicit_support=on;explicit_support=off;

explicit_allow=on;alua_followover=on;{TPG_id=0,TPG_state=AO}}

Path Selection Policy: NIMBLE_PSP_DIRECTED

Path Selection Policy Device Config: {policy=iops iops=0 bytes=0 useANO=0 NUM_OF_MEM_ARRAY=0

GROUP_MODE=1 MODE_CHANGED=0 GROUP_ID=0 numIOsForIssueInq=10000 numIOsSinceLastInq=9300

lastPathIndex=1 NumIOsPending=0 numBytesPending=0 }

Page 33: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 33

最後に、ホストのメンテナンスモードを終了します。

ネットワーク設定

UCS FIデュアルサブネットを利用するために、iSCSIトラフィックに使用する 2つの vNICを適切な

VMware構成に設定します。vmnic と vSwitchの結果は以下の例のようになります。

図 34 – ESX ネットワーク設定

Path Selection Policy Device Custom Config: Working

Paths: vmhba32:C1:T11:L0, vmhba32:C0:T11:L0 Is Local

SAS Device: false

Is Boot USB Device: false

# vim-cmd hostsvc/maintenance_mode_exit

Page 34: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 34

図 35 – ESX iSCSIイニシエータープロパティ

図 36 – ESX iSCSI全般プロパティ

Page 35: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド 35

図 37 – ESX iSCSI NIC チーミング

Page 36: Cisco UCS とVMware ESXi5 - ctc-g.co.jpctcsp/products/nimble/doc/nimblestorage_smart... · テクニカルマーケティングソリューションガイド ニンブルストレージSmartStack

ニンブルストレージ SMARTSTACK テクニカルマーケティングガイド

36

図 38 – ESX iSCSIパスと PSP

まとめ

この文書は、ニンブルストレージ、Cisco UCS、および VMware ESXi5を設定してニンブルストレー

ジ SmartStack 統合インフラストラクチャーソリューション構成の基盤を形成するための手順の概要

を説明しています。ニンブルストレージ、Cisco、および VMwareの基本製品の取り扱い経験があれ

ば、これらの技術の上に構築される SmartStack ソリューションをサポートするうえで、このガイド

はお役に立つでしょう。

詳細はお近くのインテグレーターまたはベンダーまでお問い合わせください。

Nimble Storage, Inc.

211 River Oaks Parkway, San Jose, CA 95134

Tel: 877-364-6253; 408-432-9600 | www. nimblestorage. com | info@nimblestorage. com

© 2014 Nimble Storage, Inc.ニンブルストレージ、InfoSight、CASL、SmartStack、および NimbleConnectは Nimble Storage, Inc.の米国にお

ける商標または登録商標です。他の商標はすべて、それぞれの所有者に帰属します。

nmblbpg011(150126)