在CENTOS7下安装kubernetes填坑教程（原创）

爱是王道

　　kubernetes（以下简称“k8s”）目前是公认的最先进的容器集群管理工具，在1.0版本发布后，k8s的发展速度更加迅猛，并且得到了容器生态圈厂商的全力支持，这包括coreos、rancher等，诸多提供公有云服务的厂商在提供容器服务时也都基于k8s做二次开发来提供基础设施层的支撑，比如华为。可以说k8s也是Docker进军容器集群管理和服务编排领域最为强劲的竞争对手。
　　现在的Red Hat centos7的用户，已经可以使用熟悉的yum来直接安装k8s，但是真要安装起来，还是有相当多的坑要踩，本文就主要来帮助大家填平这些大坑！！！
　　由于k8s涉及到很多组件，关于组件的学习，网上的教程很多，但是还是推荐大家到官网上去学习。http://kubernetes.io/docs/tutorials/
　　一、环境搭建
　　在k8s中，主机只有两种角色master和nodes。我这里准备了3台centos7主机，其中一台既是master也是nodes，另外两台做nodes。
　　master安装的组件有：

• 　　docker
  
• 　　etcd       可以理解为是k8s的数据库，存储所有节点、pods、网络信息
  
• 　　kube-proxy    提供service服务的基础组件
  
• 　　kubelet    管理k8s节点的组件，因为这台master同时也是nodes，所以也要安装
  
• 　　kube-apiserver   k8s提供API的接口，是整个k8s的核心
  
• 　　kube-controller-manager 管理分配资源的组件
  
• 　　kube-scheduler    调度资源的组件
  
• 　　flanneld     整个k8s的网络组件
  

　　nodes安装的组件有：

• 　　docker
  
• 　　kube-proxy
  
• 　　kubelet
  
• 　　flanneld
  

　　接下来就是各节点网络的搭建，修改/etc/hosts,保证每台主机的hosts表一致，如下所示：
　　echo “192.168.128.160 centos-master
　　192.168.128.161 centos-minion-1
　　192.168.128.162 centos-minion-2”>> /etc/hosts
　　最后，记得关闭各节点的SElinux，避免不必要的问题。防火墙也要关闭，避免与docker容器内部的firewall冲突。
[root@centos-master ~]# systemctl stop firewalld　　[root@centos-master ~]# systemctl disable firewalld
　　二、开始安装
　　1.首先在所以节点添加k8s组件下载的yum源，如下所示：
cat >/var/log/kubernetes/kube-controller-manage.log &
　　大家有注意看到我这里在/root/security下指定的私钥和数字证书，这里我们还没有生成，所以先不要直接敲入以上的命令，我们先配置其它的配置文件。
　　etcd：
　　编辑/etc/etcd/etcd.conf
　　ETCD_LISTEN_PEER_URLS="http://localhost:2380"
　　ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
　　ETCD_ADVERTISE_CLIENT_URLS="http://0.0.0.0:2379"
　　flanneld：
　　编辑/etc/sysconfig/flanneld
　　FLANNEL_ETCD_ENDPOINTS="http://centos-master:2379"
　　FLANNEL_ETCD_PREFIX="/kube-centos/network"(此处是配置flannel网络的密钥，同一网络配置相同即可)
　　FLANNEL_OPTIONS="--iface=eno16777736"（此处填写的实际物理网卡的地址，可以用ip a命令查看，我的是eno16777736）
　　##etcdctl mkdir /kube-centos/network
　　##etcdctlmk /kube-centos/network/config "{ \"Network\": \"172.30.0.0/16\", \"SubnetLen\": 24, \"Backend\": { \"Type\": \"vxlan\" } }"
　　注册flannet网络到etcd中
　　kubelet：
　　编辑/etc/kubernetes/kubelet
　　KUBELET_ADDRESS="--address=0.0.0.0"
　　KUBELET_HOSTNAME="--hostname-override=centos-master"
　　KUBELET_API_SERVER="--api-servers=http://centos-master:8080"
　　KUBELET_POD_INFRA_CONTAINER="--pod-infra-container-image=registry.access.redhat.com/rhel7/pod-infrastructure:latest"
　　config:
　　编辑/etc/kubernetes/config
　　KUBE_LOGTOSTDERR="--logtostderr=true"
　　KUBE_ETCD_SERVERS="--etcd-servers=http://centos-master:2379"
　　KUBE_LOG_LEVEL="--v=0"
　　KUBE_ALLOW_PRIV="--allow-privileged=false"
　　KUBE_MASTER="--master=http://centos-master:8080"
　　根据我们上面提到的master、nodes安装的组件，在master和nodes上面修改相关的配置文件，config配置文件最好都修改。
　　接着我们来生成上面提到生成密钥和数字证书，在master节点创建security目录
　　mkdir -p /root/security
　　cd /root/security
　　相关证书文件，说明如下：
文件作用ca.key自己生成的CA的私钥，用于模拟一个CAca.crt用自己的私钥自签名的CA证书server.keyapi server的私钥，用于配置api server的httpsserver.csrapi server的证书请求文件，用于请求api server的证书server.crt用自己模拟的CA签发的api server的证书，用于配置api server的https　　openssl genrsa -out ca.key 2048
　　openssl req -x509 -new -nodes -key ca.key -subj "/CN=ph_ccnp" -days 10000 -out ca.crt
　　openssl genrsa -out server.key 2048
　　echo subjectAltName=IP:10.254.0.1 > extfile.cnf
　　##10.254.0.1为集群网络下mater地址，可以通过命令查看
　　##kubectlget services --all-namespaces |grep 'default'|grep 'kubernetes'|grep '443'|awk ##'{print $3}'，因为集群还没有启动，所以查看不到这个地址，可以先添加个错的，到时候启动集群以后再修改
　　openssl req -new -key server.key -subj "/CN=ph_ccnp" -out server.csr
　　openssl x509 -req -in server.csr -CA ca.crt -CAkey ca.key -CAcreateserial -extfile extfile.cnf -out server.crt -days 10000
　　3.启动服务
　　master节点：
　　/usr/bin/kube-apiserver--logtostderr=true --v=0 --etcd-servers=http://centos-master:2379 --address=0.0.0.0 --port=8080 --kubelet-port=10250 --allow-privileged=true --service-cluster-ip-range=10.254.0.0/16 --admission-control=ServiceAccount --insecure-bind-address=0.0.0.0 --client-ca-file=/root/security/ca.crt --tls-cert-file=/root/security/server.crt --tls-private-key-file=/root/security/server.key --basic-auth-file=/root/security/basic_auth.csv --secure-port=443 &>> /var/log/kubernetes/kube-apiserver.log &
　　/usr/bin/kube-controller-manager--logtostderr=true --v=0 --master=http://centos-master:8080 --root-ca-file=/root/security/ca.crt --service-account-private-key-file=/root/security/server.key & >>/var/log/kubernetes/kube-controller-manage.log &
　　for SERVICES in etcd kube-proxy kube-scheduler flanneld; do
　　systemctl restart $SERVICES
　　systemctl enable $SERVICES
　　systemctl status $SERVICES
　　done
　　nodes节点：
　　for SERVICES in kube-proxy kubelet flanneld docker; do
　　systemctl restart $SERVICES
　　systemctl enable $SERVICES
　　systemctl status $SERVICES
　　done
　　等到服务启动以后，在master上面输入kubectl get nodes
[root@centos-master kubernetes]# kubectl get nodes　　NAME              STATUS    AGE
　　centos-master     Ready     5d
　　centos-minion-1   Ready     12d
　　centos-minion-2   Ready     12d
　　现在整个集群就已经安装成功了！！
　　4.安装dashboard
　　首先，我们要下载dashboard的镜像，由于我大中华局域网的存在，导致google官方给的kubernetes-dashboard-amd64:v1.5.0镜像无法下载（坑爹！！），我们这里先去docker.io站点pull一个v1.4.0版本的镜像
　　docker pull docker.io/sailsxu/kubernetes-dashboard-amd64:v1.4.0
　　然后下载官网给的自动部署文件
　　curl  https://rawgit.com/kubernetes/dashboard/master/src/deploy/kubernetes-dashboard.yaml -o kubernetes-dashborad.yaml
　　此处需修改三处：
　　1.image: docker.io/sailsxu/kubernetes-dashboard-amd64:v1.4.0
　　2.imagePullPolicy: Always  把此行取消，否则它总是去register取镜像
　　3.# - --apiserver-host=http://my-address:port，修改为- --apiserver-host=http://centos-master:8080
　　然后我们执行
　　kubectl create -f kubernetes-dashborad.yaml
　　kubectl get po --namespace=kube-system
NAME                                                              READY STATUS RESTARTS AGE　　kubernetes-dashboard-2963774231-uzsul       1/1    Running 1              15h
　　kubectl --namespace=kube-system get po -o wide
NAME READY                              STATUS    RESTARTS      AGE            IP       NODE　　kubernetes-dashboard-2963774231-uzsul 1/1 Running  15h 172.30.9.2 centos-minion-2
　　我们可以看到现在dashboard已经运行在centos-minion-2节点上，我们在浏览器地址栏查看
　　https://192.168.128.160/api/v1/proxy/namespaces/kube-system/services/kubernetes-dashboard/#/workload?namespace=_all
　　到这里dashboard就已经安装完毕了。
　　此教程不涉及k8s的基础部分，如果有时间，我会再写一些基础部分的知识！关于k8s的ui如何使用，我也会在以后的教程中及时更新！！