Docker与OpenStack集成实战

765435

1、计算节点安装Docker
root@compute2: ~# apt install docker.io -y
或
root@compute2:~# sh -c "echo deb https://get.docker.io/ubuntu docker main >> /etc/apt/sources.list.d/docker.list"
root@compute2:~# apt-get update
root@compute2:~# apt-get install lxc-docker
root@compute2: ~# apt install docker.io -y
查看当前版本
root@compute2:/var/lib/docker# docker --version
Docker version 1.12.0, build 8eab29e
root@compute2:~# docker -v
Docker version 1.12.0, build 8eab29e
root@compute2:~# dpkg -l | grep docker
rc  docker.io                                  1.11.2-0ubuntu5~16.04                                       amd64        Linux container runtime
ii  lxc-docker                                 1.9.1                                                       amd64        Linux container runtime
ii  lxc-docker-1.9.1                           1.9.1                                                       amd64        Linux container runtime
查找镜像
root@compute2:~# docker search ubuntu
dorapro/ubuntu                    ubuntu image                                    0                    [OK]
konstruktoid/ubuntu               Ubuntu base image                               0                    [OK]
uvatbc/ubuntu                     Ubuntu images with unprivileged user            0                    [OK]
2、下载Ubuntu镜像
root@compute2: ~#  docker pull ubuntu
Using default tag: latest
latest: Pulling from library/ubuntu
2f0243478e1f: Pull complete
d8909ae88469: Pull complete
820f09abed29: Pull complete
01193a8f3d88: Pull complete
Digest: sha256:8e2324f2288c26e1393b63e680ee7844202391414dbd48497e9a4fd997cd3cbf
Status: Downloaded newer image for ubuntu:latest
root@compute2:~# docker images -a
REPOSITORY                 TAG                 IMAGE ID            CREATED             SIZE
ubuntu                     latest              bd3d4369aebc        12 days ago         126.6 MB
ubuntu-1604-sleepy_kilby   latest              94c88d9d0023        3 weeks ago         126.4 MB
ubuntu                     <none>              f8d79ba03c00        3 weeks ago         126.4 MB
cmer81/centos7-openstack   latest              3317e0f4e0fb        7 months ago        322.2 MB
3、启动并登录Docker容器
root@compute2:~# docker run -i -t ubuntu
root@c0a0294d98d2:/# cat /etc/issue
Ubuntu 16.04.1 LTS \n \l
给容器设置root密码
[iyunv@dfbc7c3db16b /]# passwd root
Changing password for user root.
New password:
Retype new password:
passwd: all authentication tokens updated successfully.
设置允许root密码登录
[iyunv@dfbc7c3db16b /]# vi /etc/ssh/sshd_config
PermitRootLogin yes
PasswordAuthentication yes
SSH到容器中
root@compute2:~# ssh 172.17.0.3
root@172.17.0.3's password:
[iyunv@dfbc7c3db16b ~]#
[iyunv@dfbc7c3db16b ~]#
[iyunv@dfbc7c3db16b ~]#
[iyunv@dfbc7c3db16b ~]# ifconfig
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 172.17.0.3  netmask 255.255.0.0  broadcast 0.0.0.0
        inet6 fe80::42:acff:fe11:3  prefixlen 64  scopeid 0x20<link>
        ether 02:42:ac:11:00:03  txqueuelen 0  (Ethernet)
        RX packets 434  bytes 52434 (51.2 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 419  bytes 42782 (41.7 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
lo: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536
        inet 127.0.0.1  netmask 255.0.0.0
        inet6 ::1  prefixlen 128  scopeid 0x10<host>
        loop  txqueuelen 1  (Local Loopback)
        RX packets 0  bytes 0 (0.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 0  bytes 0 (0.0 B)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
[iyunv@dfbc7c3db16b ~]#
退出Docker容器
root@76da79f898c3:/# exit
exit
4、在另一个docker主机查看目前运行的docker进程的ID
root@compute2:~# docker ps -a
CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS                        PORTS               NAMES
a8ffa3d75d46        ubuntu              "/bin/bash"         51 seconds ago      Exited (127) 42 seconds ago                       sleepy_kilby
aee77e7dec7b        ubuntu              "/bin/bash"         2 minutes ago       Exited (0) 53 seconds ago                         compassionate_hodgkin
c0a0294d98d2        ubuntu              "/bin/bash"         47 minutes ago      Exited (127) 38 minutes ago                       ecstatic_ritchie
5、将镜像保存为
root@compute2:~# docker commit a8ffa3d75d46 ubuntu-1604-sleepy_kilby
sha256:94c88d9d002364ed5b405357f6910fbc6fdddda917a07f99933a65e66e74fe99
6、将此镜像打包成一个文件
root@compute2:~# docker save ubuntu-1604-sleepy_kilby > /root/ubuntu-1604.tar
7、从终端直接启动容器
root@compute2:~# docker run -i -t -p 50001:22 ubuntu-1604-sleepy_kilby /bin/bash
nova-docker方案实践
安装novadocker
python-pip 有一个BUG,如果已安装python-pip，先删除，
root@compute2:~# apt-get remove python-pip
root@compute2:~#apt-get autoremove
root@compute2:~# easy_install -U pip
root@compute2:~# pip install -e git+https://github.com/stackforge/nova-docker#egg=novadocker
root@compute2:~# cd src/novadocker/
root@compute2:~/src/novadocker# python setup.py install
配置NOVA
root@compute2:~# vim /etc/nova/nova.conf
[DEFAULT]
compute_driver = novadocker.virt.docker.DockerDriver
创建/etc/nova/rootwrap.d/dockers.filters
# nova-rootwrap command filters for setting up network in the docker driver
# This file should be owned by (and only-writeable by) the root user
[Filters]
# nova/virt/docker/driver.py: 'ln', '-sf', '/var/run/netns/.*'
ln: CommandFilter, /bin/ln, root
配置Glance
root@controller:/etc/glance# vim glance-api.conf
[DEFAULT]
container_formats = ami,ari,aki,bare,ovf,docker
下载Docker镜像
查找适用于OpenStack的镜像
root@compute2:~# docker search openstack
NAME                                 DESCRIPTION                                     STARS     OFFICIAL   AUTOMATED
krystism/openstack-keystone          An easy way to try openstack keystone service   7                    [OK]
continuse/openstack-controller       OpenStack Controller Service for CoreOS         5                    [OK]
centurylink/openstack-cli-wetty      This image provides a Wetty terminal with ...   4                    [OK]
cmer81/centos7-openstack             Centos7 image for openstack-cloudinit           2                    [OK]
continuse/openstack-nova-docker      OpenStack Nova-Docker Service for CoreOS        2                    [OK]
cosmicq/openstack-nova               (project not complete) The Nova (compute) ...   1                    [OK]
cosmicq/openstack-rabbitmq           (project not complete) RabbitMQ (AMQP) ser...   1                    [OK]
ennweb/openstack-controller          OpenStack Controller                            1                    [OK]
cosmicq/openstack-keystone           (project not complete) The Keystone (authe...   1                    [OK]
cosmicq/openstack-mariadb            (project not complete) MariaDB and PHPMyAd...   1                    [OK]
continuse/openstack-network          OpenStack Network (Neutron) Service for Co...   1                    [OK]
continuse/openstack-compute          OpenStack Compute Service for CoreOS            1                    [OK]
krystism/openstack-glance            An easy way to try openstack glance service     1                    [OK]
factual/docker-openstack-database    OpenStack Database (MariaDB)                    1                    [OK]
pataquets/openstack-dashboard                                                        0                    [OK]
colstrom/openstack-cli               OpenStack CLI                                   0                    [OK]
continuse/openstack-cinder           OpenStack Block Storage Service for CoreOS      0                    [OK]
alvaroaleman/openstack-horizon       A simple Docker image for the Openstack Ho...   0                    [OK]
pataquets/openstack-keystone                                                         0                    [OK]
pierrezemb/exherbo-openstack         Exherbo image generator for OpenStack           0                    [OK]
factual/docker-openstack-messaging   OpenStack Messaging service (RabbitMQ)          0                    [OK]
ennweb/openstack-compute             OpenStack Compute on Docker                     0                    [OK]
anguslees/openstack-tox                                                              0                    [OK]
gbraad/openstack-client              Container with the OpenStack client and 's...   0                    [OK]
jmcvea/openstack-client              OpenStack command line tools                    0                    [OK]
root@compute2:~#
root@compute2:~# docker pull cmer81/centos7-openstack
Using default tag: latest
latest: Pulling from cmer81/centos7-openstack
a3ed95caeb02: Pull complete
3286cdf780ef: Pull complete
889e0983d8b8: Pull complete
48ed448d00d6: Pull complete
0ebb5fe0f8ad: Pull complete
c93dc6f68ef1: Pull complete
cf8e344e8663: Pull complete
9827381c9ae3: Pull complete
8f1f6b35ea96: Pull complete
Digest: sha256:84b374fe2a8bf40a8716d79e5ea179b2fb28352e8a18fa49ddda2ab295bebe6e
Status: Downloaded newer image for cmer81/centos7-openstack:latest
root@compute2:~# docker save cmer81/centos7-openstack | glance --os-image-api-version 1 image-create --is-public=True --container-format=docker --disk-format=raw --name cmer81/centos7-openstack
+------------------+--------------------------------------+
| Property         | Value                                |
+------------------+--------------------------------------+
| checksum         | 114c19e55638a317b837ae73f6c8314c     |
| container_format | docker                               |
| created_at       | 2016-08-17T03:03:22.000000           |
| deleted          | False                                |
| deleted_at       | None                                 |
| disk_format      | raw                                  |
| id               | 521f5a87-22cc-4851-a812-dee1b17b5e46 |
| is_public        | True                                 |
| min_disk         | 0                                    |
| min_ram          | 0                                    |
| name             | cmer81/centos7-openstack             |
| owner            | f9027cccf7da4f2399c7fdf32e8776f0     |
| protected        | False                                |
| size             | 334179328                            |
| status           | active                               |
| updated_at       | 2016-08-17T03:03:28.000000           |
| virtual_size     | None                                 |
+------------------+--------------------------------------+
查找ubuntu镜像
root@compute2:~# docker search ubuntu
NAME                              DESCRIPTION                                     STARS     OFFICIAL   AUTOMATED
ubuntu                            Ubuntu is a Debian-based Linux operating s...   4468      [OK]      
ubuntu-upstart                    Upstart is an event-based replacement for ...   65        [OK]      
rastasheep/ubuntu-sshd            Dockerized SSH service, built on top of of...   31                   [OK]
torusware/speedus-ubuntu          Always updated official Ubuntu docker imag...   27                   [OK]
ubuntu-debootstrap                debootstrap --variant=minbase --components...   25        [OK]      
nickistre/ubuntu-lamp             LAMP server on Ubuntu                           8                    [OK]
nuagebec/ubuntu                   Simple always updated Ubuntu docker images...   7                    [OK]
nickistre/ubuntu-lamp-wordpress   LAMP on Ubuntu with wp-cli installed            6                    [OK]
nimmis/ubuntu                     This is a docker images different LTS vers...   5                    [OK]
jordi/ubuntu                      Ubuntu Base Image                               1                    [OK]
admiringworm/ubuntu               Base ubuntu images based on the official u...   1                    [OK]
seetheprogress/ubuntu             Ubuntu image provided by seetheprogress us...   1                    [OK]
darksheer/ubuntu                  Base Ubuntu Image -- Updated hourly             1                    [OK]
life360/ubuntu                    Ubuntu is a Debian-based Linux operating s...   0                    [OK]
datenbetrieb/ubuntu               custom flavor of the official ubuntu base ...   0                    [OK]
konstruktoid/ubuntu               Ubuntu base image                               0                    [OK]
lynxtp/ubuntu                     https://github.com/lynxtp/docker-ubuntu         0                    [OK]
esycat/ubuntu                     Ubuntu LTS                                      0                    [OK]
widerplan/ubuntu                  Our basic Ubuntu images.                        0                    [OK]
croscon/ubuntu                    Crosconized Ubuntu                              0                    [OK]
teamrock/ubuntu                   TeamRock's Ubuntu image configured with AW...   0                    [OK]
smartentry/ubuntu                 ubuntu with smartentry                          0                    [OK]
ustclug/ubuntu                    ubuntu image for docker with USTC mirror        0                    [OK]
dorapro/ubuntu                    ubuntu image                                    0                    [OK]
webhippie/ubuntu                  Docker images for ubuntu                        0                    [OK]
下载镜像
root@compute2:~# docker pull ubuntu
Using default tag: latest
latest: Pulling from library/ubuntu
Digest: sha256:8e2324f2288c26e1393b63e680ee7844202391414dbd48497e9a4fd997cd3cbf
Status: Image is up to date for ubuntu:latest
把镜像上传到Glance中
root@compute2:~# docker save ubuntu | glance image-create --container-format=docker --disk-format=raw --name ubuntu-docer
+------------------+--------------------------------------+
| Property         | Value                                |
+------------------+--------------------------------------+
| checksum         | 364a6b81f4a3f5fb5c4a0e1d62395322     |
| container_format | docker                               |
| created_at       | 2016-08-17T02:46:58Z                 |
| disk_format      | raw                                  |
| id               | e2616723-b55d-48a6-9548-606f0da7dddb |
| min_disk         | 0                                    |
| min_ram          | 0                                    |
| name             | ubuntu-docer                         |
| owner            | f9027cccf7da4f2399c7fdf32e8776f0     |
| protected        | False                                |
| size             | 132096512                            |
| status           | active                               |
| tags             | []                                   |
| updated_at       | 2016-08-17T02:46:59Z                 |
| virtual_size     | None                                 |
| visibility       | private                              |
+------------------+--------------------------------------+
、
root@compute2:~# nova image-list
+--------------------------------------+-----------------------------------------+--------+--------+
| ID                                   | Name                                    | Status | Server |
+--------------------------------------+-----------------------------------------+--------+--------+
| 96872d33-73a1-4e1d-bc9e-5b4206a258af | CentOS-7-x86_64-GenericCloud            | ACTIVE |        |
| c8d224af-b3ed-42be-a29b-ea7295abf932 | Ubuntu16.04-server-clouding-powerpc64el | ACTIVE |        |
| e9b86672-f9d2-48f3-b57f-0320fc4a048f | Ubuntu16.04-xenial-server-cloud-amd64   | ACTIVE |        |
| 521f5a87-22cc-4851-a812-dee1b17b5e46 | cmer81/centos7-openstack                | ACTIVE |        |
| e2616723-b55d-48a6-9548-606f0da7dddb | ubuntu-docer                            | ACTIVE |        |
| ba5c1506-4389-42b5-acfb-849855b019b5 | ubuntu-server-clouding-amd64            | ACTIVE |        |
| b2170c9b-41da-4b55-a4ec-88b8b3fc528e | ubuntu1604-server-cloud-ppc64el         | ACTIVE |        |
| c94a41f5-10b2-43f8-ae5d-1c91886f6f94 | windows2012server-clouding              | ACTIVE |        |
+--------------------------------------+-----------------------------------------+--------+--------+
root@compute2:~# nova boot centos7-openstack --image 521f5a87-22cc-4851-a812-dee1b17b5e46 --nic net-id=a969f82e-b4cc-48cf-a04a-64923dc73b4a --flavor 22 --security-groups default --key key
+--------------------------------------+-----------------------------------------------------------------+
| Property                             | Value                                                           |
+--------------------------------------+-----------------------------------------------------------------+
| OS-DCF:diskConfig                    | MANUAL                                                          |
| OS-EXT-AZ:availability_zone          |                                                                 |
| OS-EXT-SRV-ATTR:host                 | -                                                               |
| OS-EXT-SRV-ATTR:hostname             | centos7-openstack                                               |
| OS-EXT-SRV-ATTR:hypervisor_hostname  | -                                                               |
| OS-EXT-SRV-ATTR:instance_name        | instance-0000070f                                               |
| OS-EXT-SRV-ATTR:kernel_id            |                                                                 |
| OS-EXT-SRV-ATTR:launch_index         | 0                                                               |
| OS-EXT-SRV-ATTR:ramdisk_id           |                                                                 |
| OS-EXT-SRV-ATTR:reservation_id       | r-3euaomoc                                                      |
| OS-EXT-SRV-ATTR:root_device_name     | -                                                               |
| OS-EXT-SRV-ATTR:user_data            | -                                                               |
| OS-EXT-STS:power_state               | 0                                                               |
| OS-EXT-STS:task_state                | scheduling                                                      |
| OS-EXT-STS:vm_state                  | building                                                        |
| OS-SRV-USG:launched_at               | -                                                               |
| OS-SRV-USG:terminated_at             | -                                                               |
| accessIPv4                           |                                                                 |
| accessIPv6                           |                                                                 |
| adminPass                            | KjbkCzV8VVn2                                                    |
| config_drive                         |                                                                 |
| created                              | 2016-08-17T03:23:21Z                                            |
| description                          | -                                                               |
| flavor                               | zoom.medium (22)                                                |
| hostId                               |                                                                 |
| host_status                          |                                                                 |
| id                                   | 41dad309-eb1a-4445-b1eb-81b87cd34d97                            |
| image                                | cmer81/centos7-openstack (521f5a87-22cc-4851-a812-dee1b17b5e46) |
| key_name                             | key                                                             |
| locked                               | False                                                           |
| metadata                             | {}                                                              |
| name                                 | centos7-openstack                                               |
| os-extended-volumes:volumes_attached | []                                                              |
| progress                             | 0                                                               |
| security_groups                      | default                                                         |
| status                               | BUILD                                                           |
| tenant_id                            | f9027cccf7da4f2399c7fdf32e8776f0                                |
| updated                              | 2016-08-17T03:23:21Z                                            |
| user_id                              | 957ba591d7824e0ab6e54d5c40e6be85                                |
+--------------------------------------+-----------------------------------------------------------------+
root@compute2:~# nova list
+--------------------------------------+-------------------+--------+------------+-------------+-----------------------------------+
| ID                                   | Name              | Status | Task State | Power State | Networks                          |
+--------------------------------------+-------------------+--------+------------+-------------+-----------------------------------+
| 41dad309-eb1a-4445-b1eb-81b87cd34d97 | centos7-openstack | ACTIVE | -          | Running     | private=10.1.1.80, 10.1.1.78      |
| 4f6c62b0-3917-4a4c-a017-bc57ff1a7e4d | ubuntu            | ACTIVE | -          | Running     | private=10.1.1.46