zookeeper+mesos+docker+swarm

小洪維尼

　　zookeeper 集群安装
　　1、下载
　　wget http://mirrors.cnnic.cn/apache/zookeeper/stable/zookeeper-3.4.8.tar.gz
　　

　　2、解压
　　mkdir /usr/local/zookeeper && tar zxvf zookeeper-3.4.8.tar.gz && mv zookeeper-3.4.8/* /usr/local/zookeeper ** rm -rf zookeeper-3.4.8
　　

　　3、创建配置文件
　　Zookeeper文件配置详解
　　dataDir：数据目录
　　dataLogDir：日志目录
　　clientPort：客户端连接端口
　　tickTime：Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。
　　initLimit：Zookeeper的Leader 接受客户端（Follower）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 5个心跳的时间（也就是tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒
　　syncLimit：表示 Leader 与 Follower 之间发送消息时请求和应答时间长度，最长不能超过多少个tickTime 的时间长度，总的时间长度就是 2*2000=4 秒。
　　server.A=B：C：D：
　　A 是一个数字，表示这个是第几号服务器；
　　B 是这个服务器的 ip 地址；
　　C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；
　　D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口
　　

　　

　　cd /usr/local/zookeeper/conf
　　

　　vim /usr/local/zookeeper/conf/zk1.cfg
　　

　　tickTime=2000
　　initLimit=10
　　syncLimit=5
　　dataDir=/data/zookeeper/zk1/data
　　dataLogDir=/data/zookeeper/zk1/logs
　　clientPort=2181
　　server.1=10.10.16.194:3181:4181
　　server.2=10.10.16.194:3182:4182
　　server.3=10.10.16.194:3183:4183
　　

　　echo "1" >/data/zookeeper/zk1/data/myid
　　

　　

　　

　　vim /usr/local/zookeeper/conf/zk2.cfg
　　

　　tickTime=2000
　　initLimit=10
　　syncLimit=5
　　dataDir=/data/zookeeper/zk2/data
　　dataLogDir=/data/zookeeper/zk2/logs
　　clientPort=2182
　　server.1=10.10.16.194:3181:4181
　　server.2=10.10.16.194:3182:4182
　　server.3=10.10.16.194:3183:4183
　　

　　echo "2" >/data/zookeeper/zk2/data/myid
　　

　　

　　

　　vim /usr/local/zookeeper/conf/zk3.cfg
　　

　　tickTime=2000
　　initLimit=10
　　syncLimit=5
　　dataDir=/data/zookeeper/zk3/data
　　dataLogDir=/data/zookeeper/zk3/logs
　　clientPort=2183
　　server.1=10.10.16.194:3181:4181
　　server.2=10.10.16.194:3182:4182
　　server.3=10.10.16.194:3183:4183
　　

　　echo "3" >/data/zookeeper/zk3/data/myid
　　

　　

　　4、启动Zookeeper
　　/usr/local/zookeeper/bin/zkServer.sh start /usr/local/zookeeper/conf/zk1.cfg
　　/usr/local/zookeeper/bin/zkServer.sh start /usr/local/zookeeper/conf/zk2.cfg
　　/usr/local/zookeeper/bin/zkServer.sh start /usr/local/zookeeper/conf/zk3.cfg
　　

　　5、查看Zookeeper状态
　　/usr/local/zookeeper/bin/zkServer.sh status /usr/local/zookeeper/conf/zk1.cfg
　　/usr/local/zookeeper/bin/zkServer.sh status /usr/local/zookeeper/conf/zk2.cfg
　　/usr/local/zookeeper/bin/zkServer.sh status /usr/local/zookeeper/conf/zk3.cfg
　　

　　

　　

　　

　　Mesos集群部署
　　1、安装Mesosphere仓库到本地
　　rpm -Uvh http://repos.mesosphere.com/el/7/noarch/RPMS/mesosphere-el-repo-7-1.noarch.rpm
　　

　　2、Mesos Master部署
　　yum -y install mesos
　　

　　配置Mesos连接Zookeeper文件
　　vim /etc/mesos/zk
　　zk://10.10.16.194:2181,10.10.16.194:2182,10.10.16.194:2183/mesos
　　systemctl start mesos-master mesos-slave
　　

　　

　　3、Mesos Slave部署
　　yum -y install mesos
　　

　　echo 10.10.16.193 > /etc/mesos-slave/hostname
　　echo "mesos,docker" > /etc/mesos-slave/containerizers
　　

　　vim /etc/mesos/zk
　　zk://10.10.16.194:2181,10.10.16.194:2182,10.10.16.194:2183/mesos
　　

　　systemctl start mesos-slave
　　修改/etc/mesos-slave/hostname后无法启动问题，删除rm -rf /var/lib/mesos/meta/*后再重启即可
　　

　　

　　

　　Dokcer  swarm 部署
　　1、下载swarm
　　docker pull swarm
　　2、启动swarm
　　docker run -d --net=host swarm --debug manage -c mesos-experimental --cluster-opt mesos.address=10.10.16.194 --cluster-opt mesos.tasktimeout=100s  --cluster-opt mesos.user=root --cluster-opt mesos.offertimeout=10m --cluster-opt mesos.port=3375 --cluster-opt mesos.enablerevocable=true --host=0.0.0.0:4375 zk://10.10.16.194:2181,10.10.16.194:2182,10.10.16.194:2183/mesos
　　3、运行容器
　　docker -H 10.10.16.194:4375 run -d -m 512m -e constraint:res-type==~regular  docker.16qian.cn/niu-ding-feng/product-service-web_prd_1.0.1
　　

　　

　　CONSUL安装
　　1、下载CONSUL以及web ui
　　https://www.consul.io/downloads.html
　　

　　2、解压后启动服务
　　在server服务器执行启动命令
　　./consul agent -server -bootstrap-expect 2 -data-dir /tmp/consul -node=n1 -bind=10.10.16.194 -ui-dir /root/web_ui -dc=dc1 -client=10.10.16.194 &
　　./consul agent -server -bootstrap-expect 2 -data-dir /tmp/consul -node=n2 -bind=10.10.16.193 -ui-dir -dc=dc1 &
　　在10.10.16.193服务器执行以下命令
　　./consul join 10.10.16.194
　　

　　在clent服务器执行以下命令
　　./consul agent  -data-dir /tmp/consul -node=n3 -bind=10.10.16.190  -dc=dc1 &
　　./consul join 10.10.16.194
　　

　　上面几步就完成了初始化Server节点，以后通过-rejoin参数启动，可以重新加入集群。
　　./consul agent  -data-dir /tmp/consul -node=n3 -bind=10.10.16.190  -dc=dc1 -rejoin &
　　

　　3、查看信息
　　./consul members
　　./consul info
　　

　　4、查看节点
　　curl 127.0.0.1:8500/v1/catalog/nodes
　　

　　5、使用DNS协议查看节点信息
　　dig @127.0.0.1 -p 8600 10.10.16.190
　　

　　6、注册服务
　　curl -X PUT -d '{"Datacenter": "dc1", "Node": "mysql-1", "Address":"mysql-1.node.consul","Service": {"Service": "mysql", "tags": ["master","v1"], "Port": 3306}}' http://127.0.0.1:8500/v1/catalog/register
　　curl -X PUT -d '{"Datacenter": "dc1", "Node": "mysql-2", "Address":"mysql-2.node.consul","Service": {"Service": "mysql", "tags": ["slave","v1"],"Port": 3306}}' http://127.0.0.1:8500/v1/catalog/register
　　

　　7、查看服务
　　curl http://127.0.0.1:8500/v1/catalog/service/mysql
　　dig @127.0.0.1 -p 8600 10.10.16.194 SRV
　　

　　删除服务
　　curl -X PUT -d '{"Node": "mysql-1"}' http://127.0.0.1:8500/v1/catalog/deregister
　　curl -X PUT -d '{"Node": "mysql-2"}' http://127.0.0.1:8500/v1/catalog/deregister
　　

　　8、 K/V存储
　　consul还提供了键/值存储的功能。
　　如 查询 所有K/V
　　curl -v http://localhost:8500/v1/kv/?recurse
　　

　　保存键为web/key2, flags 为42， 值为true的记录。
　　curl -X PUT -d 'test' http://localhost:8500/v1/kv/web/key2?flags=42
　　true
　　

　　删除记录：
　　curl -X DELETE http://localhost:8500/v1/kv/web/sub?recurse
　　

　　更新值：
　　curl -X PUT -d 'newval' http://localhost:8500/v1/kv/web/key1?cas=97
　　true
　　

　　更新index：
　　curl "http://localhost:8500/v1/kv/web/key2?index=101&wait=5s"
　　

　　结果：[{"CreateIndex":98,"ModifyIndex":101,"Key":"web/key2","Flags":42,"Value":"dGVzdA=="}]