Debian 12 bookworm
Sponsored Link

Ceph Pacific : ブロックデバイスを利用する2023/06/19

 
以下のような構成の Ceph クラスターストレージを、[dlp] クライアントから利用できるように設定します。
                                         |
        +--------------------+           |
        |   [dlp.srv.world]  |10.0.0.30  |
        |     Ceph Client    +-----------+
        |                    |           |
        +--------------------+           |
            +----------------------------+----------------------------+
            |                            |                            |
            |10.0.0.51                   |10.0.0.52                   |10.0.0.53 
+-----------+-----------+    +-----------+-----------+    +-----------+-----------+
|   [node01.srv.world]  |    |   [node02.srv.world]  |    |   [node03.srv.world]  |
|     Object Storage    +----+     Object Storage    +----+     Object Storage    |
|     Monitor Daemon    |    |                       |    |                       |
|     Manager Daemon    |    |                       |    |                       |
+-----------------------+    +-----------------------+    +-----------------------+

 
例として、クライアント上でブロックデバイスを作成して利用します。
[1] 管理ノードからクライアントホストへ SSH 公開鍵を転送し、設定します。
# 公開鍵転送

root@node01:~#
ssh-copy-id dlp

# クライアントホストに必要なパッケージをインストール

root@node01:~#
ssh dlp "apt -y install ceph-common"
# クライアントホストに必要なファイルを転送

root@node01:~#
scp /etc/ceph/ceph.conf dlp:/etc/ceph/

ceph.conf                                     100%  273   343.7KB/s   00:00
root@node01:~#
scp /etc/ceph/ceph.client.admin.keyring dlp:/etc/ceph/

ceph.client.admin.keyring                     100%  151   191.1KB/s   00:00
root@node01:~#
ssh dlp "chown ceph:ceph /etc/ceph/ceph.*"

[2] クライアント上でのブロックデバイスの作成とマウントです。
# デフォルト RBD プール [rbd] 作成

root@dlp:~#
ceph osd pool create rbd 32

pool 'rbd' created
# Placement Groups オートスケール 有効化

root@dlp:~#
ceph osd pool set rbd pg_autoscale_mode on

set pool 3 pg_autoscale_mode to on
# プール 初期化

root@dlp:~#
rbd pool init rbd

root@dlp:~#
ceph osd pool autoscale-status

POOL                     SIZE  TARGET SIZE  RATE  RAW CAPACITY   RATIO  TARGET RATIO  EFFECTIVE RATIO  BIAS  PG_NUM  NEW PG_NUM  AUTOSCALE  BULK
device_health_metrics      0                 3.0        479.9G  0.0000                                  1.0       1              on         False
rbd                       19                 3.0        479.9G  0.0000                                  1.0      32              on         False

# 10G のブロックデバイスを作成

root@dlp:~#
rbd create --size 10G --pool rbd rbd01
# 確認

root@dlp:~#
rbd ls -l

NAME   SIZE    PARENT  FMT  PROT  LOCK
rbd01  10 GiB            2

# 作成したブロックデバイスをマッピング

root@dlp:~#
rbd map rbd01

/dev/rbd0
# 確認

root@dlp:~#
rbd showmapped

id  pool  namespace  image  snap  device
0   rbd              rbd01  -     /dev/rbd0

# EXT4 でフォーマット

root@dlp:~#
mkfs.ext4 /dev/rbd0

mke2fs 1.47.0 (5-Feb-2023)
Discarding device blocks: done
Creating filesystem with 2621440 4k blocks and 655360 inodes
Filesystem UUID: b826aec2-064e-4bae-9d30-b37a3ec5ee15
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632

Allocating group tables: done
Writing inode tables: done
Creating journal (16384 blocks): done
Writing superblocks and filesystem accounting information: done

root@dlp:~#
mount /dev/rbd0 /mnt

root@dlp:~#
df -hT

Filesystem                  Type      Size  Used Avail Use% Mounted on
udev                        devtmpfs  1.9G     0  1.9G   0% /dev
tmpfs                       tmpfs     392M  572K  391M   1% /run
/dev/mapper/debian--vg-root ext4       28G  1.4G   26G   6% /
tmpfs                       tmpfs     2.0G     0  2.0G   0% /dev/shm
tmpfs                       tmpfs     5.0M     0  5.0M   0% /run/lock
/dev/vda1                   ext2      455M   58M  373M  14% /boot
tmpfs                       tmpfs     392M     0  392M   0% /run/user/0
/dev/rbd0                   ext4      9.8G   24K  9.3G   1% /mnt
[3] 作成したブロックデバイスやプールを削除する場合は以下のように実行します。
プールを削除する場合は [Monitor Daemon] の設定で、[mon allow pool delete = true] が設定されている必要があります
# アンマップ

root@dlp:~#
rbd unmap /dev/rbd/rbd/rbd01
# ブロックデバイス削除

root@dlp:~#
rbd rm rbd01 -p rbd

Removing image: 100% complete...done.
# プール削除
# ceph osd pool delete [プール名] [プール名] ***

root@dlp:~#
ceph osd pool delete rbd rbd --yes-i-really-really-mean-it

pool 'rbd' removed
関連コンテンツ