4. Cinder块存储对接Ceph
# 1. 启用 Cinder Ceph 后端
在部署机找到 **/etc/kolla/globals.yml**
,并设置
enable_cinder: "yes"
cinder_backend_ceph: "yes"
# 2. 复制Ceph 配置文件
添加文件 /etc/kolla/config/cinder/ceph.conf
内容和 /etc/kolla/config/glance/ceph.conf
内容一样,可以使用软连接
mkdir -p /etc/kolla/config/cinder
ln -s /etc/kolla/config/glance/ceph.conf /etc/kolla/config/cinder/ceph.conf
# 3. 复制Ceph keyring文件
一共有三个:
- /etc/kolla/config/cinder/cinder-volume/ceph_cinder_keyring
- /etc/kolla/config/cinder/cinder-backup/ceph_cinder_keyring
- /etc/kolla/config/cinder/cinder-backup/ceph_cinder_backup_keyring
在部署机创建目录
mkdir -p /etc/kolla/config/cinder/cinder-volume
mkdir -p /etc/kolla/config/cinder/cinder-backup
回到 ceph 部署主机,注意这个10.10.1.80 是部署机的ip
ceph auth get-or-create client.cinder | ssh <kolla_deploy_host> sudo tee /etc/kolla/config/cinder/cinder-volume/ceph.client.cinder.keyring
ceph auth get-or-create client.cinder | ssh <kolla_deploy_host> sudo tee /etc/kolla/config/cinder/cinder-backup/ceph.client.cinder.keyring
ceph auth get-or-create client.cinder-backup | ssh <kolla_deploy_host> sudo tee /etc/kolla/config/cinder/cinder-backup/ceph.client.cinder-backup.keyring
cinder-backup需要两个密钥环来访问卷和备份池。
# 4. 配置Nova允许访问Cinder卷
Ceph RBD 可用作 Nova 实例临时磁盘的存储后端。这避免了对计算节点上实例的本地存储的要求。它提高了迁移性能,因为不需要在管理程序之间复制实例的临时磁盘。
# 4.1 启用 Nova Ceph 后端
在部署机找到 **/etc/kolla/globals.yml**
,并设置
nova_backend_ceph: "yes"
# 4.2 配置 Ceph 身份验证详细信息
在部署机找到 **/etc/kolla/globals.yml**
,并设置
ceph_nova_user: "cinder"
# 4.3 Ceph 配置文件复制
这里直接软连接 glance
的 ceph.conf
就行,所有的 ceph.conf
都可以是一样
mkdir -p /etc/kolla/config/nova/
ln -s /etc/kolla/config/glance/ceph.conf /etc/kolla/config/nova/ceph.conf
# 4.4 Ceph 密钥环文件复制
回到 ceph 部署主机,注意这个 <kolla_deploy_host> 是部署机的 ip
ceph auth get-or-create client.cinder | ssh <kolla_deploy_host> sudo tee /etc/kolla/config/nova/ceph.client.cinder.keyring
# 5. 重新部署
回到部署机
kolla-ansible -i ./multinode deploy
# 6. 验证结果
# 6.1. 验证docker
在任意存储节点
root@control01:~# docker ps | grep cinder
92905efa4637 quay.nju.edu.cn/openstack.kolla/ubuntu-source-cinder-backup:yoga "dumb-init --single-…" 5 minutes ago Up 5 minutes (healthy) cinder_backup
1168528d13a7 quay.nju.edu.cn/openstack.kolla/ubuntu-source-cinder-volume:yoga "dumb-init --single-…" 5 minutes ago Up 5 minutes (healthy) cinder_volume
2a8bbbeb6d1a quay.nju.edu.cn/openstack.kolla/ubuntu-source-cinder-scheduler:yoga "dumb-init --single-…" 6 minutes ago Up 6 minutes (healthy) cinder_scheduler
39bda6a9fc42 quay.nju.edu.cn/openstack.kolla/ubuntu-source-cinder-api:yoga "dumb-init --single-…" 6 minutes ago Up 6 minutes (healthy) cinder_api
root@control01:~#
# 6.2 创建卷
回到Horizon,可以看到在 项目 中会多出一个卷
这里随便新建一个任意大小的卷,能创建成功就没问题。
回到 ceph 部署主机看下存储池里面有没有这个卷,注意卷的ID
root@pve1:~# rbd ls -p volumes
volume-3c9ccc53-ae51-4000-a85a-47cb9249dd10
# 引用
上次更新: 2023/09/21, 09:39:07