クラウド接続ストレージとIaaSサーバのiSCSI接続

2021-10-12 2021-10-18 Toma Fujimoto

この記事での構成

ここでは、IaaSサーバからクラウド接続ストレージをiSCSIプロトコルを使用してマウントする方法をご紹介します。

使用する構成は下図になります

接続元サーバ側のiSCSIイニシエータの準備

接続元のサーバに対して、あらかじめパッケージをインストールし、iSCSIイニシエータを作成する必要があります。
作成したiSCSIイニシエータのiQN(InitiatorName) の値を、ポータルでのHost登録に利用します

RHEL/CentOSの場合

iSCSIイニシエータ作成に必要なパッケージをリポジトリからインストールします。

sudo yum install iscsi-initiator-utils device-mapper-multipath sg3_utils

パッケージインストール後に作成されたiSCSIイニシエータの IQNを下記コマンドで確認し、出力されたInitiatorName の値をコピー等で控えます。

cat /etc/iscsi/initiatorname.iscsi
出力結果
InitiatorName=＜iscsiイニシエータの iqn＞

上記で取得した InitiatorName の値は、ポータルでのHost登録に利用します。

Ubuntsuの場合

iSCSIイニシエータ作成に必要なパッケージをリポジトリからインストールします。

sudo apt install open-iscsi scsitools multipath-tools

パッケージインストール後に作成されたiSCSIイニシエータの IQNを下記コマンドで確認し、出力されたInitiatorName の値をコピー等で控えます。

cat /etc/iscsi/initiatorname.iscsi
出力結果
InitiatorName=＜iscsiイニシエータの iqn＞

上記で取得した InitiatorName の値は、ポータルでのHost登録に利用します。

クラウド接続ストレージの設定

ポータルの切り替え

ここからの操作は、ポータル画面を「クラウド接続ストレージ」に切り替えて操作します。
ポータル画面右上のタブで対象をリソースプールからクラウド接続ストレージに変更します。

クラウド接続ストレージのHost登録

左メニューから「クラウドストレージ」ー「Host」を選択します。
ホスト画面で「ホスト新規作成」ボタンを押します

ホスト情報を登録します。IQNには、サーバのiSCSIイニシエータインストールの手順で調べた InitiatorName の値を入力します。

Block Storage ボリューム作成

左メニューから「クラウドストレージ」ー「storage」を選択します。
ストレージ画面で「新規作成」タブから「ボリューム新規作成」を選択します。

作成するボリュームのパラメータを入力し、確定します。

ブロックストレージのボリュームが作成されます。

作成したブロックストレージボリュームの左端のボックスをクリックしてチェックし、表示されたメニューから「ボリュームマッピング」を選択します

対象のボリュームに接続するホストを、登録したものから選択し「マップ」

マップされたホストが、対象のボリュームに対しiSCSI接続可能になります。

iSCSI接続用パラメータの取得

ボリュームを選択し、メニューから「マウントコマンド確認」を選択すると、OSで使用するCLI・Powershellコマンドやボリューム側のiSCSIターゲットIPが確認できます。

ファイアーウォールルールの作成

ホスト用サーバからブロックストレージボリュームへアクセスするための、iSCSI通信用のファイヤーウォールポリシーを作成します。

今回は、内部サーバセグメント(172.24.0.0/24)からブロックストレージのインターフェースに割り当てられたIPアドレス(172.16.62.65～172.16.62.70)へのiSCSI通信のみを許可するファイアーウォールポリシーを作成します。

リソースプール用ポータルで対象のNSX-Edgeに、ファイヤーウォールポリシーを作成します。

送信元IP	送信先IP	プロトコル	ターゲットポート	アクション	備考
172..24.0.0/24	172.16.62.65-17216.62.70	TCP	3260	accept	iSCSI通信に限定

iSCSI接続の作成(Linux OSの場合)

iSCSIターゲットへのログイン

ボリュームをマウントするOS上で下記コマンドを実行し、ターゲットへログインします

#iSCSIターゲットを走査
sudo iscsiadm -m discovery -t sendtargets -p ISCSIボリュームのターゲットIP
#発見したiSCSIターゲットにログイン
sudo iscsiadm -m node --login

#iSCSIセッションのステータスを確認
sudo iscsiadm -m session

実行結果
tcp: [1] 172.18.62.66:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)
tcp: [2] 172.18.62.67:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)
tcp: [3] 172.18.62.68:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)
tcp: [4] 172.18.62.69:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)
tcp: [5] 172.18.62.70:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)
tcp: [6] 172.18.62.65:3260,4099 iqn.2009-11.com.infinidat:storage:infinibox-sn-2822 (non-flash)

接続したiSCSIターゲットからボリュームを検出します

Ubuntuの場合

sudo /sbin/rescan-scsi-bus

Redhat/Cent OSの場合

sudo /usr/bin/rescan-scsi-bus.sh

マルチパスの構成

マルチパスが有効になっているか確認します。初回起動時で /etc/multipath.confが存在しない場合には作成を行います。

multipathd  -l

実行結果(/etc/multipath.confが存在しない場合)
Oct 07 15:51:40 | /etc/multipath.conf does not exist, blacklisting all devices.
Oct 07 15:51:40 | You can run "/sbin/mpathconf --enable" to create
Oct 07 15:51:40 | /etc/multipath.conf. See man mpathconf(8) for more details
Oct 07 15:51:40 | DM multipath kernel driver not loaded

#/etc/multipath.confが存在しない場合、作成
/sbin/mpathconf --enable

ログインしたiSCSIセッションでマルチパスが構成されていること確認します

multipath -l

実行結果
mpatha (36742b0f000000b06000000000000c595) dm-2 NFINIDAT,InfiniBox
size=100G features='0' hwhandler='1 alua' wp=rw
`-+- policy='round-robin 0' prio=0 status=active
  |- 33:0:0:1 sdb 8:16 active undef running
  |- 34:0:0:1 sdc 8:32 active undef running
  |- 35:0:0:1 sdd 8:48 active undef running
  |- 37:0:0:1 sdf 8:80 active undef running
  |- 36:0:0:1 sde 8:64 active undef running
  `- 38:0:0:1 sdg 8:96 active undef running

実行結果から、６つのターゲットIPでそれぞれディスク(sdb～sdg)を検出していますがmultipathdにより同じボリュームとして認識され、マルチパス接続のボリューム(mpatha)が認識されていることが確認できます。

ディスクのフォーマット(GPTディスクの場合)

ここでは、２TB以上の容量のディスク利用を想定し、接続したボリュームの初期設定(GPTテーブルの作成)を行います。
（２TB以下のディスク容量でのご利用の場合、MBRでのフォーマットでも問題ありません。）

#接続したmpathaボリュームに対し、gdiskツールを実行
gdisk /dev/mapper/mpatha

実行結果
GPT fdisk (gdisk) version 1.0.5

Partition table scan:
  MBR: not present
  BSD: not present
  APM: not present
  GPT: not present

Creating new GPT entries in memory.

#oコマンドで GPTテーブルを作成
Command (? for help):o

This option deletes all partitions and creates a new protective MBR.
Proceed? (Y/N): Y

#構成を書き込み
Command (? for help): wq

パーティションについては、gdiskツールを使用して作成できますが、作成せずにボリュームに直接ファイルシステムを展開することが可能です。パーティションを使用せずに直接ファイルシステムを使用することのメリット・デメリットについては、外部サイトにナレッジが紹介されておりますのでのでご参考ください。

ここでは、パーティションを作成せず直接ボリュームにファイルシステムを作成しています

#ext4ファイルシステムでのフォーマット
mkfs -t ext4 /dev/mapper/mpatha

mke2fs 1.45.5 (07-Jan-2020)
Found a gpt partition table in /dev/mapper/mpatha
Proceed anyway? (y,N) y

実行結果
Discarding device blocks: done
Creating filesystem with 26214400 4k blocks and 6553600 inodes
Filesystem UUID: bb0ff9f9-c484-469f-9f49-6d4b2b227604
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872

Allocating group tables: done
Writing inode tables: done
Creating journal (131072 blocks): done
Writing superblocks and filesystem accounting information: done

フォーマットしたボリュームを /mnt/iSCSIにマウントします

#マウントポイントを作成
mkdir /mnt/iSCSI

#ボリュームをマウント
mount -t ext4 /dev/mapper/mpatha /mnt/iSCSI

起動時の自動マウント設定(Linux OS)

サービスの自動起動

iSCSIサービスとmultipathサービスの自動起動設定(RHEL/CentOS)

systemctl enable iscsid.service systemctl enable multipathd.service

ファイルシステムの自動マウント

Linuxの場合、/etc/fstab にマウントポイントを追記します。

[マウントポイント/mnt/iSCSI を作成して、ext4ファイルシステムの/dev/mapper/mpatha1をマウントする場合]
まず、マウントするパーティションのUUIDを調べます。

blkid |grep /dev/mapper/mpatha1

実行結果から、対象のパーティションのUUIDの値を調べます。

UUIDをベースにマウント設定をfstabに追記します。

echo "UUID=対象パーティションのUUID /mnt/iSCSI ext4 _netdev 0 0 >> /etc/fstab

カテゴリー: How to Build