h0945466 发表于 2018-6-1 09:31:15

Ceph与OpenStack整合(将云主机磁盘镜像文件直接建在ceph集群vms存储池中)

  思路及实现:
  1.承接前两篇文章,镜像服务的存储 池为images,云盘的存储池为volumes,目前要完成openstack新建云主机磁盘镜像文件直接存放到ceph中去(在ceph中新建存储池vms)。
  云主机在启动时需要有能访问镜像存储池images和云盘存储池volumes的能力,所以你需要在ceph集群的monitor节点新建存储池vms,同时新建账号,该账号具有对vms,images,
  以及volumes三个存储池的rwx权限
  2.这里请务必注意一个细节:回忆第一篇ceph与openstack整合仅作为云盘挂载,我们新建了一个账号client.cinder,该账号对volumes池有rwx权限,然后我们分发配置文件和client.cinder账号的秘钥文件给cinder-volume节点,分发client.cinder的秘钥文件给计算节点,同时利用该秘钥文件制作了uuid,然后将该uuid写入到了compute节点的配置文件中,二此uuid唯一(这也就意味着:计算节点秘钥uuid----->client.cinder用户------>(rwx)ceph的volumes池),所以我们必须在ceph集群原有账号client.cinder的基础上新增对vms,images的rwx权限,然后cinder和compute节点公用client.cinder账号)
   ceph auth caps client.cinder mon 'allow r' osd 'allow class-read object_prefix rbd_children, allow rwx pool=libvirt-pool' -o /etc/ceph/ceph.client.cinder.keyring
                  scp /etc/ceph/ceph.client.cinder.keyring 所有计算节点:/etc/ceph
                  scp /etc/ceph/ceph.client.cinder.keyring 所有计算节点:/etc/ceph
  3.导出账号的秘钥文件分发给所有计算节点(如果已经做过ceph与openstack整合仅提供云盘功能,这一步可以跳过)
  在所有计算节点执行下列操作:
                    cat > secret.xml <<EOF
                       <secret ephemeral='no' private='no'>
                        <usage type='ceph'>
                       <name>client.cinder secret</name>
                        </usage>
                       </secret>
                        EOF

[*]  virsh secret-define --file secret.xml
[*]  找到刚刚定义的client.cinder用户的uuid

[*]  virsh secret-list
找到ceph提供的秘钥文件的秘钥
[*]  cat /etc/ceph/ceph.client.cinder.keyring
virsh secret-set-value $(virsh secret-list |grep client.cinder |awk '{print $1}') --base64$(cat /etc/ceph/ceph.client.cinder.keyring |awk 'NR==2{print $3}')  4.修改配置文件
  vim /etc/nova/nova.conf
                  rbd_user=cinder
  rbd_secret_uuid=dda10a4e-c03c-b029-ef07-ce86e7a07bdd      ------------------>值为:virsh secret-list |grep client.cinder |awk '{print $1}
                 images_type = rbd #只有在 boot disk 放在 ceph 中才需要配置这个,否则,设置为 qcow2
               images_rbd_pool = vms
               images_rbd_ceph_conf = /etc/ceph/ceph.conf

                 disk_cachemodes="network=writeback"
               inject_password = false
               inject_key = false
               inject_partition = -2
               live_migration_flag="VIR_MIGRATE_UNDEFINE_SOURCE,VIR_MIGRATE_PEER2PEER,VIR_MIGRATE_LIVE,VIR_MIGRATE_PERSIST_DEST,VIR_MIGRATE_TUNNELLED"

[*]   /etc/init.d/openstack-nova-compute restart
  
页: [1]
查看完整版本: Ceph与OpenStack整合(将云主机磁盘镜像文件直接建在ceph集群vms存储池中)