设为首页 收藏本站

运维网

 找回密码
 立即注册
查看: 1092|回复: 0

[经验分享] nginx源码编译和集群及高可用

[复制链接]
yes-no

尚未签到
发表于 2018-11-16 09:17:06 | 显示全部楼层 |阅读模式
　　实验环境
　　server7      nginx主机
　　server8      http
　　server9      http
　　server10      nginx
　　[root@server7 ~]# tar zxf nginx-1.12.0.tar.gz
　　[root@server7 ~]# ls
　　nginx-1.12.0  nginx-1.12.0.tar.gz  varnish
　　[root@server7 ~]# cd nginx-1.12.0
　　[root@server7 nginx-1.12.0]# ls
　　auto     CHANGES.ru  configure  html     man     src
　　CHANGES  conf        contrib    LICENSE  README
　　[root@server7 nginx-1.12.0]# cd src/core/
　　[root@server7 core]# vim nginx.h  #去掉版本号
DSC0000.jpg

　　[root@server7 core]# cd /root/nginx-1.12.0/auto/cc/
　　[root@server7 cc]# vim gcc   注释debug
DSC0001.jpg

　　[root@server7 cc]#  yum install -y pcre-devel openssl-devel zlib-devel gcc
　　#安装依赖性
　　[root@server7 nginx-1.12.0]# ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-http_stub_status_module
　　[root@server7 nginx-1.12.0]# make && make install  #编译完成
　　[root@server7 nginx-1.12.0]# cd /usr/local/nginx/sbin/
　　[root@server7 sbin]# ls
　　nginx
　　[root@server7 sbin]# ./nginx
　　查看端口：
DSC0002.jpg

　　浏览器访问
DSC0003.jpg

　　添加用户
　　[root@server7 sbin]# useradd  -u 800 nginx

　　[root@server7 sbin]#>　　uid=800(nginx) gid=800(nginx) 组=800(nginx)
　　[root@server7 sbin]# cd  /usr/local/nginx/conf/
　　[root@server7 conf]# vim nginx.conf
DSC0004.jpg

　　做软连接
　　[root@server7 conf]# cd /usr/local/nginx/sbin/
　　[root@server7 sbin]# ls
　　nginx
　　[root@server7 sbin]# ln -s /usr/local/nginx/sbin/nginx  /usr/local/sbin/
　　[root@server7 sbin]# which nginx
　　/usr/local/sbin/nginx

　　[root@server7 sbin]# nginx -s>　　[root@server7 ~]# vim /usr/local/nginx/conf/nginx.conf
DSC0005.jpg

　　[root@server7 ~]# vim /etc/security/limits.conf
DSC0006.jpg

　　[nginx@server7 ~]$ ulimit  -a

　　core file>
　　data seg>　　scheduling priority             (-e) 0

　　file>　　pending signals                 (-i) 7812
　　max locked memory       (kbytes, -l) 64

　　max memory>　　open files                      (-n) 65535

　　pipe>　　POSIX message queues     (bytes, -q) 819200
　　real-time priority              (-r) 0

　　stack>　　cpu time               (seconds, -t) unlimited
　　max user processes              (-u) 1024
　　virtual memory          (kbytes, -v) unlimited
　　file locks                      (-x) unlimited
　　[root@server7 ~]# vim /usr/local/nginx/conf/nginx.conf
DSC0007.jpg

DSC0008.jpg

　　制作证书
　　[root@server7 ~]# cd /etc/pki/tls/certs/
　　[root@server7 certs]# ls
　　ca-bundle.crt  ca-bundle.trust.crt  make-dummy-cert  Makefile  renew-dummy-cert
　　[root@server7 certs]# pwd
　　/etc/pki/tls/certs
　　[root@server7 certs]# make cert.pem
DSC0009.jpg

　　[root@server7 tls]# mv -r cert.pem   /usr/local/nginx/conf/

　　[root@server7 tls]# nginx  -s>　　nginx: [emerg] SSL_CTX_use_PrivateKey_file("/usr/local/nginx/conf/cert.key") failed (SSL: error:02001002:system library:fopen:No such file or directory:fopen('/usr/local/nginx/conf/cert.key','r') error:20074002:BIO routines:FILE_CTRL:system lib error:140B0002:SSL routines:SSL_CTX_use_PrivateKey_file:system lib)
　　nginx: configuration file /usr/local/nginx/conf/nginx.conf test failed
　　原来配置文件证书中默认是cert.key 这里生成cert.pem 故改之
DSC00010.jpg

　　[root@server7 tls]# nginx  -t
　　nginx: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
　　nginx: configuration file /usr/local/nginx/conf/nginx.conf test is successful

　　[root@server7 tls]# nginx  -s>　　浏览器访问
DSC00011.jpg DSC00012.jpg DSC00013.jpg

　　加模块
　　[root@server7 tls]# cd  /usr/local/nginx/conf/
　　[root@server7 conf]# vim nginx.conf
DSC00014.jpg


　　[root@server7 conf]# nginx -s>　　加入http虚拟主机
　　[root@server7 conf]# vim nginx.conf
DSC00015.jpg DSC00016.jpg

　　新建目录,重新加载服务
　　[root@server7 conf]# mkdir   /www1
　　[root@server7 conf]# cd /www1/
　　[root@server7 www1]# ls
　　[root@server7 www1]# vim index.html

　　[root@server7 www1]# nginx  -s>　　物理机加解析测试：
　　[root@localhost ~]# curl www.cara.org
　　cara1.............
　　[root@server7 conf]# vim nginx.conf
DSC00017.jpg


　　[root@server7 conf]# nginx -s>　　物理机加解析测试:
　　[root@localhost ~]# curl bbs.cara.org
　　cara2.............
　　#负载均衡
DSC00018.jpg


　　[root@server7 conf]# nginx  -s >　　server9.server8 安装httpd服务：
　　[root@server8 ~]# vim /var/www/html/index.html
　　[root@server8 ~]# cat /var/www/html/index.html
　　server8
　　[root@server9 html]# cat /var/www/html/index.html
　　server 9
　　物理机测试：
DSC00019.jpg

　　可通过加入不同的参数，实现不同的需求
DSC00020.jpg

DSC00021.jpg

　　高可用
　　[root@server7 local]# scp -r nginx/  server10:/usr/local
　　[root@server10 ~]# cd /usr/local/
　　[root@server10 local]# ls
　　bin  etc  games  include  lib  lib64  libexec  nginx  sbin  share  src
　　[root@server10 local]# useradd -u 800 nginx

　　[root@server10 local]#>　　uid=800(nginx) gid=800(nginx) 组=800(nginx)
　　server7.10均安装ricci服务(系统自带高可用包，需yum源添加)，设置密码，设置为开机启动
　　[root@server7 local]# yum install -y ricci
　　[root@server7 local]# passwd ricci
　　更改用户 ricci 的密码 。
　　新的 密码：
　　无效的密码： 它基于字典单词
　　无效的密码： 过于简单
　　重新输入新的 密码：
　　passwd： 所有的身份验证令牌已经成功更新。
　　[root@server7 local]# /etc/init.d/ricci  start
　　Starting oddjobd:                                          [  OK  ]
　　generating SSL certificates...  done
　　Generating NSS database...  done
　　启动 ricci：                                               [确定]
　　[root@server7 local]# chkconfig  ricci on
　　[root@server7 local]#  yum install -y luci
　　[root@server7 local]# /etc/init.d/luci  start
　　Adding following auto-detected host>server7' address, to the configuration of self-managed certificate/var/lib/luci/etc/cacert.config' (you can change them by editing /var/lib/luci/etc/cacert.config', removing the generated certificate/var/lib/luci/certs/host.pem' and restarting luci):
　　(none suitable found, you can still do it manually as mentioned above)
　　Generating a 2048 bit RSA private key
　　writing new private key to '/var/lib/luci/certs/host.pem'
　　Start luci...                                              [确定]
　　Point your web browser to https://server7:8084 (or equivalent) to access luci
　　[root@server7 local]# chkconfig  luci on
　　浏览器访问，做好解析,用root用户进入，添加节点
DSC00022.jpg

　　查看集群
DSC00023.jpg

　　用物理机安装fence 控制断电。物理机安装：
　　[root@localhost ~]# rpm -qa |grep fence
　　libxshmfence-1.2-1.el7.x86_64
　　fence-virtd-multicast-0.3.0-16.el7.x86_64
　　fence-virtd-libvirt-0.3.0-16.el7.x86_64
　　fence-virtd-0.3.0-16.el7.x86_64
　　[root@localhost ~]# fence_virtd -c
　　Module search path [/usr/lib64/fence-virt]:
　　Available backends:
　　libvirt 0.1
　　Available listeners:
　　multicast 1.2
　　Listener modules are responsible for accepting requests
　　from fencing clients.
　　Listener module [multicast]:
　　The multicast listener module is designed for use environments
　　where the guests and hosts may communicate over a network using
　　multicast.
　　The multicast address is the address that a client will use to
　　send fencing requests to fence_virtd.
　　Multicast IP Address [225.0.0.12]:
　　Using ipv4 as family.
　　Multicast IP Port [1229]:
　　Setting a preferred interface causes fence_virtd to listen only
　　on that interface.  Normally, it listens on all interfaces.
　　In environments where the virtual machines are using the host
　　machine as a gateway, this must be set (typically to virbr0).
　　Set to 'none' for no interface.
　　Interface [virbr0]: br0
　　The key file is the shared key information which is used to
　　authenticate fencing requests.  The contents of this file must
　　be distributed to each physical host and virtual machine within
　　a cluster.
　　Key File [/etc/cluster/fence_xvm.key]:
　　Backend modules are responsible for routing requests to
　　the appropriate hypervisor or management layer.
　　Backend module [libvirt]:
　　Configuration complete.
　　=== Begin Configuration ===
　　backends {
　　libvirt {
　　uri = "qemu:///system";
　　}
　　}
　　listeners {
　　multicast {
　　port = "1229";
　　family = "ipv4";
　　interface = "br0";
　　address = "225.0.0.12";
　　key_file = "/etc/cluster/fence_xvm.key";
　　}
　　}
　　fence_virtd {
　　module_path = "/usr/lib64/fence-virt";
　　backend = "libvirt";
　　listener = "multicast";
　　}
　　=== End Configuration ===
　　Replace /etc/fence_virt.conf with the above [y/N]? y
　　[root@localhost ~]# mkdir -p /etc/cluster/
　　[root@localhost ~]# cd /etc/cluster/
　　[root@localhost cluster]# dd if=/dev/urandom of=/etc/cluster/fence_xvm.key bs=128 count=1
　　记录了1+0 的读入
　　记录了1+0 的写出
　　128字节(128 B)已复制，0.000668548 秒，191 kB/秒
　　[root@localhost cluster]# ls
　　fence_xvm.key
　　[root@localhost cluster]# scp fence_xvm.key  server7:/etc/cluster/
　　root@server7's password:
　　fence_xvm.key                                 100%  128     0.1KB/s   00:00
　　[root@localhost cluster]# scp fence_xvm.key  server10:/etc/cluster/
　　root@server10's password:
　　fence_xvm.key                                 100%  128     0.1KB/s   00:00
　　建立fence：
DSC00024.jpg

　　回到 Nodes，并选择 server7
DSC00025.jpg

DSC00026.jpg

DSC00027.jpg

　　粘贴uuid
DSC00028.jpg

　　server10同server7
DSC00029.jpg

DSC00030.jpg

DSC00031.jpg

　　[root@server7 cluster]# cd
　　[root@server7 ~]# vim  /etc/init.d/nginx
　　#!/bin/sh
　　#

nginx        Startup script for nginx
　　#

chkconfig: - 85 15

processname: nginx

config: /usr/local/nginx/conf/nginx/nginx.conf

pidfile: /usr/local/nginx/logs/nginx.pid

description: nginx is an HTTP and reverse proxy server
　　#

BEGIN INIT INFO

Provides: nginx

Required-Start: $local_fs $remote_fs $network

Required-Stop: $local_fs $remote_fs $network

Default-Start: 2 3 4 5

Default-Stop: 0 1 6

Short-Description: start and stop nginx

END INIT INFO

Source function library.
　　. /etc/rc.d/init.d/functions
　　if [ -L $0 ]; then
　　initscript=/bin/readlink -f $0
　　else
　　initscript=$0
　　fi
　　#sysconfig=/bin/basename $initscript
　　#if [ -f /etc/sysconfig/$sysconfig ]; then

. /etc/sysconfig/$sysconfig
　　#fi
　　nginx=${NGINX-/usr/local/nginx/sbin/nginx}
　　prog=/bin/basename $nginx
　　conffile=${CONFFILE-/usr/local/nginx/conf/nginx.conf}
　　lockfile=${LOCKFILE-/var/lock/subsys/nginx}
　　pidfile=${PIDFILE-/usr/local/nginx/logs/nginx.pid}
　　SLEEPMSEC=${SLEEPMSEC-200000}
　　UPGRADEWAITLOOPS=${UPGRADEWAITLOOPS-5}
　　RETVAL=0
　　start() {
　　echo -n $"Starting $prog: "
　　

daemon --pidfile=${pidfile} ${nginx} -c ${conffile}　　
RETVAL=$?
　　
echo
　　
[ $RETVAL = 0 ] && touch ${lockfile}
　　
return $RETVAL
　　

　　}
　　stop() {
　　echo -n $"Stopping $prog: "
　　killproc -p ${pidfile} ${prog}
　　RETVAL=$?
　　echo
　　[ $RETVAL = 0 ] && rm -f ${lockfile} ${pidfile}
　　}
　　reload() {
　　echo -n $"Reloading $prog: "
　　killproc -p ${pidfile} ${prog} -HUP
　　RETVAL=$?
　　echo
　　}
　　upgrade() {
　　oldbinpidfile=${pidfile}.oldbin
　　

configtest -q || return　　
echo -n $"Starting new master $prog: "
　　
killproc -p ${pidfile} ${prog} -USR2
　　
echo
　　

　　
for i in `/usr/bin/seq $UPGRADEWAITLOOPS`; do
　　/bin/usleep $SLEEPMSEC
　　if [ -f ${oldbinpidfile} -a -f ${pidfile} ]; then
　　echo -n $"Graceful shutdown of old $prog: "
　　killproc -p ${oldbinpidfile} ${prog} -QUIT
　　RETVAL=$?
　　echo
　　return
　　fi
　　
done
　　

　　
echo $"Upgrade failed!"
　　
RETVAL=1
　　

　　}
　　configtest() {
　　if [ "$#" -ne 0 ] ; then
　　case "$1" in
　　-q)
　　FLAG=$1
　　;;
　　*)
　　;;
　　esac
　　shift
　　fi
　　${nginx} -t -c ${conffile} $FLAG
　　RETVAL=$?
　　return $RETVAL
　　}
　　rh_status() {
　　status -p ${pidfile} ${nginx}
　　}

See how we were called.
　　case "$1" in
　　start)
　　rh_status >/dev/null 2>&1 && exit 0
　　start
　　;;
　　stop)
　　stop
　　;;
　　status)
　　rh_status
　　RETVAL=$?
　　;;
　　restart)
　　configtest -q || exit $RETVAL
　　stop
　　start
　　;;
　　upgrade)
　　rh_status >/dev/null 2>&1 || exit 0
　　upgrade
　　;;
　　condrestart|try-restart)
　　if rh_status >/dev/null 2>&1; then
　　stop
　　start
　　fi
　　;;
　　force-reload|reload)
　　reload
　　;;
　　configtest)
　　configtest
　　;;
　　*)
　　echo $"Usage: $prog {start|stop|restart|condrestart|try-restart|force-reload|upgrade|reload|status|help|configtest}"
　　RETVAL=2
　　esac
　　exit $RETVAL
　　[root@server7 ~]# chmod +x /etc/init.d/nginx
　　[root@server7 ~]# /etc/init.d/nginx  start
　　正在启动 nginx：                                           [确定]
　　[root@server7 init.d]# scp nginx  server10:/etc/init.d/
DSC00032.jpg

DSC00033.jpg DSC00034.jpg DSC00035.jpg

　　[root@server7 ~]# clustat
　　Cluster Status for luci @ Wed Jul  4 22:00:02 2018
　　Member Status: Quorate

　　Member Name                            >　　server7                                     1 Online, Local, rgmanager
　　server10                                    2 Online, rgmanager
　　Service Name                   Owner (Last)                   State
　　service:nginx                  server7                        started
　　[root@server7 ~]# clusvcadm  -rnginx -m server10

　　Trying to>　　service:nginx is now running on server10
　　##将服务转移到server10上     粗体nginx为建立时的组名
　　[root@server7 ~]# clustat
　　Cluster Status for luci @ Wed Jul  4 22:07:31 2018
　　Member Status: Quorate

　　Member Name                            >　　server7                                     1 Online, Local, rgmanager
　　server10                                    2 Online, rgmanager
　　Service Name                   Owner (Last)                   State
　　service:nginx                  server10                       started
　　网页来回测试
DSC00036.jpg

　　[root@server10 ~]# ip addr
　　1: lo:  mtu 16436 qdisc noqueue state UNKNOWN
　　link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
　　inet 127.0.0.1/8 scope host lo
　　inet6 ::1/128 scope host
　　valid_lft forever preferred_lft forever
　　2: eth0:  mtu 1500 qdisc pfifo_fast state UP qlen 1000
　　link/ether 52:54:00:6d:4b:07 brd ff:ff:ff:ff:ff:ff
　　inet 172.25.35.10/24 brd 172.25.35.255 scope global eth0
　　inet 172.25.35.200/24 scope global secondary eth0
　　inet6 fe80::5054:ff:fe6d:4b07/64 scope link
　　valid_lft forever preferred_lft forever
　　私有vip地址会随master漂移
　　##使内核崩溃，测试fence是否生效
　　[root@server10 ~]# echo c > /proc/sysrq-trigger  自动回到7上
　　[root@server7 ~]# clustat
　　Cluster Status for luci @ Wed Jul  4 22:22:25 2018
　　Member Status: Quorate

　　Member Name                            >　　server7                                     1 Online, Local, rgmanager
　　server10                                    2 Online, rgmanager
　　Service Name                   Owner (Last)                   State
　　service:nginx                  server7                        started
　　[root@server7 ~]#  ip ad
　　1: lo:  mtu 16436 qdisc noqueue state UNKNOWN
　　link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
　　inet 127.0.0.1/8 scope host lo
　　inet6 ::1/128 scope host
　　valid_lft forever preferred_lft forever
　　2: eth0:  mtu 1500 qdisc pfifo_fast state UP qlen 1000
　　link/ether 52:54:00:09:2d:4d brd ff:ff:ff:ff:ff:ff
　　inet 172.25.35.7/24 brd 172.25.35.255 scope global eth0
　　inet 172.25.35.200/24 scope global secondary eth0
　　inet6 fe80::5054:ff:fe09:2d4d/64 scope link
　　valid_lft forever preferred_lft forever
　　vip地址也漂移过来了



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表，该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有，请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意，请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息，一经发现立即删除。若您因此触犯法律，一切后果自负，我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集，我们仅提供一个展示、介绍、观摩学习的平台，我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责，亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏，不得用于商业或者其他用途，否则，一切后果均由您自己承担，我们对此不承担任何法律责任
7、如涉及侵犯版权等问题，请您及时通知我们，我们将立即采取措施予以解决
8、联系人Email：admin@iyunv.com 网址：www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址：https://www.yunweiku.com/thread-635615-1-1.html 上篇帖子： keepalived实现nginx调度器高可用（二） 下篇帖子： NGINX VHOST配置文件的使用 之四
回复

使用道具 举报

返回列表
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群，最新一手资源尽在官方微信交流群！快快加入我们吧...

扫描微信二维码查看详情

客服 E-mail:iyunvcom@gmail.com

本站由青云提供云计算服务

运维网--中国最专业的运维工程师交流社区

豫ICP备20007574号-1 Copyright © 2012-2025

关于我们

发展历程

联系我们

关注我们

广告服务

广告案例

隐私条款

免责声明

用户登录

用户注册

版主守则

申请版主

手机版

金币获取

帮助中心

每日签到

Good Good

Study

Day Day

UP


客服E-mail:kefu@iyunv.com 客服QQ：1061981298


QQ群⑦：运维网交流群⑦ QQ群⑧：运维网交流群⑧ k8s群：运维网kubernetes交流群


提醒：禁止发布任何违反国家法律、法规的言论与图片等内容；本站内容均来自个人观点与网络等信息，非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来，其版权均归原作者及其网站所有，我们尊重他人的合法权益，如有内容侵犯您的合法权益，请及时与我们联系进行核实删除！



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表