CentOS 7
Sponsored Link

OpenStack Liberty : ストレージを利用する(マルチバックエンド)2015/11/17

 
仮想マシンインスタンスには一定容量のディスクは割り当てられていますが、 ディスクが足りなくなった場合やデータは別で保管しておきたい場合等は、 Cinder が提供するブロックストレージ機能を利用することができます。
ここではバックエンドとして NFS および GlusterFS のマルチバックエンド構成で設定します。
                                      +------------------+           +------------------+
                             10.0.0.50| [ Storage Node ] |  10.0.0.61|                  |
+------------------+            +-----+   Cinder-Volume  |     +-----+   GlusterFS #1   |
| [ Control Node ] |            | eth0|                  |     | eth0|                  |
|     Keystone     |10.0.0.30   |     +------------------+     |     +------------------+
|      Glance      |------------+------------------------------+
|     Nova API     |eth0        |     +------------------+     |     +------------------+
|    Cinder API    |            | eth0| [ Compute Node ] |     | eth0|                  |
+------------------+            +-----+   Nova Compute   |     +-----+   GlusterFS #2   |
                             10.0.0.51|                  |  10.0.0.62|                  |
                                      +------------------+     |     +------------------+
                                                               |
                                                               |     +------------------+
                                                               | eth0|                  |
                                                               +-----+        NFS       |
                                                            10.0.0.40|                  |
                                                                     +------------------+
[1]
こちらを参考に LAN内に NFS サーバーを用意しておきます。
なお、当例では「nfs.srv.world」上の「/storage」ディレクトリを共有ディレクトリとして設定します。
[2]
こちらを参考に LAN内に GlusterFS サーバーを用意しておきます。
なお、当例では「gfs01」と「gfs02」で構築したレプリカ構成の「vol_replica」ボリュームを利用するように設定します。
[3] Storage ノードの設定です。
# EPEL からインストール

[root@storage ~]#
yum --enablerepo=epel -y install nfs-utils glusterfs glusterfs-fuse
[root@storage ~]#
vi /etc/cinder/cinder.conf
# [DEFAULT] セクション内の適当な場所へ追記

enabled_backends=nfs,glusterfs
# 最終行へ追記

[nfs]
volume_driver = cinder.volume.drivers.nfs.NfsDriver
volume_backend_name = NFS
nfs_shares_config = /etc/cinder/nfs_shares
nfs_mount_point_base = $state_path/mnt_nfs
[glusterfs]
volume_driver = cinder.volume.drivers.glusterfs.GlusterfsDriver
volume_backend_name = GlusterFS
glusterfs_shares_config = /etc/cinder/glusterfs_shares
glusterfs_mount_point_base = $state_path/mnt_glusterfs
[root@storage ~]#
vi /etc/cinder/nfs_shares
# 新規作成:NFS共有ディレクトリを指定 (複数ある場合は1行ずつ列挙)

nfs.srv.world:/storage
[root@storage ~]#
vi /etc/cinder/glusterfs_shares
# 新規作成:GlusterFS ボリュームを指定 (複数ある場合は1行ずつ列挙)

gfs01.srv.world:/vol_replica
[root@storage ~]#
chmod 640 /etc/cinder/nfs_shares

[root@storage ~]#
chgrp cinder /etc/cinder/nfs_shares

[root@storage ~]#
chmod 640 /etc/cinder/glusterfs_shares

[root@storage ~]#
chgrp cinder /etc/cinder/glusterfs_shares

[root@storage ~]#
systemctl restart openstack-cinder-volume

[4] NFS, GlusterFS がマウントできるように Compute ノードの設定を変更します。
# EPEL からインストール

[root@node01 ~]#
yum --enablerepo=epel -y install nfs-utils glusterfs glusterfs-fuse
[root@node01 ~]#
vi /etc/nova/nova.conf
# [DEFAULT] セクション内の任意の場所へ追記

osapi_volume_listen=0.0.0.0
volume_api_class=nova.volume.cinder.API
[root@node01 ~]#
systemctl restart openstack-nova-compute

[5] ボリュームタイプを作成します。作業場所はどこでもよいですが、ここでは Control ノード上で行います。
# 事前に環境変数を設定

[root@dlp ~(keystone)]#
echo "export OS_VOLUME_API_VERSION=2" >> ~/keystonerc

[root@dlp ~(keystone)]#
source ~/keystonerc
[root@dlp ~(keystone)]#
cinder type-create nfs

+--------------------------------------+------+-------------+-----------+
|                  ID                  | Name | Description | Is_Public |
+--------------------------------------+------+-------------+-----------+
| 64101cca-28d9-4a00-bebd-205eb607c697 | nfs  |      -      |    True   |
+--------------------------------------+------+-------------+-----------+

[root@dlp ~(keystone)]#
cinder type-create glusterfs

+--------------------------------------+-----------+-------------+-----------+
|                  ID                  |    Name   | Description | Is_Public |
+--------------------------------------+-----------+-------------+-----------+
| 7119e1bf-83bc-44d1-bb24-342d48db4d66 | glusterfs |      -      |    True   |
+--------------------------------------+-----------+-------------+-----------+

[root@dlp ~(keystone)]#
cinder type-list

+--------------------------------------+-----------+-------------+-----------+
|                  ID                  |    Name   | Description | Is_Public |
+--------------------------------------+-----------+-------------+-----------+
| 64101cca-28d9-4a00-bebd-205eb607c697 |    nfs    |      -      |    True   |
| 7119e1bf-83bc-44d1-bb24-342d48db4d66 | glusterfs |      -      |    True   |
+--------------------------------------+-----------+-------------+-----------+
[6] [5]で作成したボリュームタイプと cinder.conf で定義した名前を関連付けます。
[root@dlp ~(keystone)]#
cinder type-key nfs set volume_backend_name=NFS

[root@dlp ~(keystone)]#
cinder type-key glusterfs set volume_backend_name=GlusterFS

[root@dlp ~(keystone)]#
cinder extra-specs-list

+--------------------------------------+-----------+----------------------------------------+
|                  ID                  |    Name   |              extra_specs               |
+--------------------------------------+-----------+----------------------------------------+
| 64101cca-28d9-4a00-bebd-205eb607c697 |    nfs    |    {u'volume_backend_name': u'NFS'}    |
| 7119e1bf-83bc-44d1-bb24-342d48db4d66 | glusterfs | {u'volume_backend_name': u'GlusterFS'} |
+--------------------------------------+-----------+----------------------------------------+
[7] ボリュームタイプを指定してボリュームを作成します。
[root@dlp ~(keystone)]#
cinder create --display_name disk_nfs --volume-type nfs 10

+---------------------------------------+--------------------------------------+
|                Property               |                Value                 |
+---------------------------------------+--------------------------------------+
|              attachments              |                  []                  |
|           availability_zone           |                 nova                 |
|                bootable               |                false                 |
|          consistencygroup_id          |                 None                 |
|               created_at              |      2015-11-18T12:31:13.000000      |
|              description              |                 None                 |
|               encrypted               |                False                 |
|                   id                  | e227e6ed-4741-4802-988f-c55beff7f397 |
|                metadata               |                  {}                  |
|            migration_status           |                 None                 |
|              multiattach              |                False                 |
|                  name                 |               disk_nfs               |
|         os-vol-host-attr:host         |                 None                 |
|     os-vol-mig-status-attr:migstat    |                 None                 |
|     os-vol-mig-status-attr:name_id    |                 None                 |
|      os-vol-tenant-attr:tenant_id     |   d625e02b3d394afbad250def2f88fefa   |
|   os-volume-replication:driver_data   |                 None                 |
| os-volume-replication:extended_status |                 None                 |
|           replication_status          |               disabled               |
|                  size                 |                  10                  |
|              snapshot_id              |                 None                 |
|              source_volid             |                 None                 |
|                 status                |               creating               |
|                user_id                |   b4c316b93a464f8ea46b01bd01a52003   |
|              volume_type              |                 nfs                  |
+---------------------------------------+--------------------------------------+

[root@dlp ~(keystone)]#
cinder create --display_name disk_glusterfs --volume-type glusterfs 10

+---------------------------------------+--------------------------------------+
|                Property               |                Value                 |
+---------------------------------------+--------------------------------------+
|              attachments              |                  []                  |
|           availability_zone           |                 nova                 |
|                bootable               |                false                 |
|          consistencygroup_id          |                 None                 |
|               created_at              |      2015-11-18T12:31:20.000000      |
|              description              |                 None                 |
|               encrypted               |                False                 |
|                   id                  | aef5116d-0fd2-42c2-a277-8f56b38cda02 |
|                metadata               |                  {}                  |
|            migration_status           |                 None                 |
|              multiattach              |                False                 |
|                  name                 |            disk_glusterfs            |
|         os-vol-host-attr:host         |                 None                 |
|     os-vol-mig-status-attr:migstat    |                 None                 |
|     os-vol-mig-status-attr:name_id    |                 None                 |
|      os-vol-tenant-attr:tenant_id     |   d625e02b3d394afbad250def2f88fefa   |
|   os-volume-replication:driver_data   |                 None                 |
| os-volume-replication:extended_status |                 None                 |
|           replication_status          |               disabled               |
|                  size                 |                  10                  |
|              snapshot_id              |                 None                 |
|              source_volid             |                 None                 |
|                 status                |               creating               |
|                user_id                |   b4c316b93a464f8ea46b01bd01a52003   |
|              volume_type              |              glusterfs               |
+---------------------------------------+--------------------------------------+

[root@dlp ~(keystone)]#
cinder list

+-----------+-----------+------------------+----------------+------+-------------+----------+-------------+-------------+
| ID        |   Status  | Migration Status |      Name      | Size | Volume Type | Bootable | Multiattach | Attached to |
+-----------+-----------+------------------+----------------+------+-------------+----------+-------------+-------------+
| aef5116d- | available |        -         | disk_glusterfs |  10  |  glusterfs  |  false   |    False    |             |
| e227e6ed- | available |        -         |    disk_nfs    |  10  |     nfs     |  false   |    False    |             |
+-----------+-----------+------------------+----------------+------+-------------+----------+-------------+-------------+
[8] あとは通常通り作成したボリュームをインスタンスに接続すればOKです。
[root@dlp ~(keystone)]#
nova list

+-----------+----------+---------+------------+-------------+-----------------------+
| ID        | Name     | Status  | Task State | Power State | Networks              |
+-----------+----------+---------+------------+-------------+-----------------------+
| 74a217fa- | CentOS_7 | SHUTOFF | -          | Shutdown    | sharednet1=10.0.0.202 |
+-----------+----------+---------+------------+-------------+-----------------------+


[root@dlp ~(keystone)]#
nova volume-attach CentOS_7 aef5116d-0fd2-42c2-a277-8f56b38cda02 auto

+----------+--------------------------------------+
| Property | Value                                |
+----------+--------------------------------------+
| device   | /dev/vdb                             |
| id       | aef5116d-0fd2-42c2-a277-8f56b38cda02 |
| serverId | 74a217fa-4e64-4b40-90c7-8df929a2e53c |
| volumeId | aef5116d-0fd2-42c2-a277-8f56b38cda02 |
+----------+--------------------------------------+

[root@dlp ~(keystone)]#
nova volume-attach CentOS_7 e227e6ed-4741-4802-988f-c55beff7f397 auto

+----------+--------------------------------------+
| Property | Value                                |
+----------+--------------------------------------+
| device   | /dev/vdc                             |
| id       | e227e6ed-4741-4802-988f-c55beff7f397 |
| serverId | 74a217fa-4e64-4b40-90c7-8df929a2e53c |
| volumeId | e227e6ed-4741-4802-988f-c55beff7f397 |
+----------+--------------------------------------+

# 接続された仮想ディスクは「in-use」ステータスになる

[root@dlp ~(keystone)]#
cinder list

+-----------+--------+------------------+----------------+------+-------------+----------+-------------+-----------------+
| ID        | Status | Migration Status |      Name      | Size | Volume Type | Bootable | Multiattach |   Attached to   |
+-----------+--------+------------------+----------------+------+-------------+----------+-------------+-----------------+
| aef5116d- | in-use |        -         | disk_glusterfs |  10  |  glusterfs  |  false   |    False    | 74a217fa-4e64-4 |
| e227e6ed- | in-use |        -         |    disk_nfs    |  10  |     nfs     |  false   |    False    | 74a217fa-4e64-4 |
+-----------+--------+------------------+----------------+------+-------------+----------+-------------+-----------------+
関連コンテンツ