设为首页 收藏本站
查看: 2170|回复: 6

[经验分享] Haproxy+Keepalived配置WEB负载均衡及动静分离

[复制链接]
累计签到:1 天
连续签到:1 天
发表于 2013-9-30 09:33:04 | 显示全部楼层 |阅读模式

一、简介

二、环境介绍

三、安装配置后端服务器

四、安装配置Haproxy

五、安装配置Keepalived

六、验证服务



一、简介

HAProxy简介:

HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理,支持虚拟主机,它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上,完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中, 同时可以保护你的web服务器不被暴露到网络上

HAProxy实现了一种事件驱动、单一进程模型,此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制,很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User-Space) 实现所有这些任务,所以没有这些问题。此模型的弊端是,在多核系统上,这些程序通常扩展性较差。这就是为什么他们必须进行优化以 使每个CPU时间片(Cycle)做更多的工作

Keepalived简介:

KeepAlived是一个类似于layer3, 4 & 5交换机制的软件,是一个高可用解决方案,通过虚拟IP地址和心跳检测对方状态来实现高可用功能。Keepalived是由两台服务器分别指定Master与Backup两个角色,而指定Master的优先级比Backup的高;所以默认情况下虚拟IP会绑定到Master服务器上,对外提供服务。而Master、Backup服务器会在一定的时间间隔向对方发送心跳信息来检测对方的存活状态,时间间隔一般为2秒钟可以修改,如果Backup发现Master宕机,那么Backup会发送ARP包到网关,然后把虚拟IP绑定到自己的网卡上,此时Backup对外提供服务,实现了自动化的故障转移,当Master恢复的时会重新接管所有资源


二、环境介绍

161758348.gif

系统版本: CentOS 6.4_x86_64

Keepalived版本: keepalived-1.2.7 点此下载

Haproxy版本: Haproxy-1.4.24 点此下载

拓扑介绍:

前端HA1与HA2服务器上安装Keepalived+Haproxy软件,两台服务器互为主备而初始状态是每台服务器上各有一个虚拟IP地址【HA1的VIP:172.16.14.10 HA2的VIP:172.16.14.11】;后台WEB1与WEB2服务器上面安装Apache软件实现负载均衡;而LAMP服务器只负责解析php程序,当用户访问的是静态页面时会由前端调度器分发到处理静态请求的服务器,如果访问的是php的动态页面,将会被分发到lamp动态服务器进行处理,实现了动、静分离的效果,

三、安装后端服务器
1、安装LAMP服务器并测试


[iyunv@lamp ~]# yum -y install httpd php mysql-server######创建测试页[iyunv@lamp ~]# vim /var/www/html/index.phpLAMP: 172.16.14.5
133004352.gif
2、安装WEB1服务器的HTTPD服务并访问测试

[iyunv@WEB1 ~]# yum -y install httpd[iyunv@WEB1 ~]# service httpd start[iyunv@WEB1 ~]# chkconfig httpd on[iyunv@WEB1 ~]# echo "WEB1:172.16.14.3" > /var/www/html/index.html


133702690.gif
3、安装WEB2服务器的HTTPD服务并访问测试

[iyunv@WEB2 ~]# yum -y install httpd[iyunv@WEB2 ~]# service httpd start[iyunv@WEB2 ~]# chkconfig httpd on[iyunv@WEB2 ~]# echo "WEB2:172.16.14.4" > /var/www/html/index.html


133933830.gif

四、安装并配置Haproxy
1、在HA1服务器安装Haproxy

[backcolor=white !important]######安装开发环境
[backcolor=white !important][iyunv@HA1 ~]# yum -y install gcc gcc-c++
[backcolor=white !important][iyunv@HA1 ~]# tar xf haproxy-1.4.24.tar.gz
[backcolor=white !important][iyunv@HA1 ~]# cd haproxy-1.4.24
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# uname -r
[backcolor=white !important]2.6.32-358.el6.x86_64
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# make TARGET=linux26 ARCH=x86_64
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# make install
[backcolor=white !important]######注释:TARGET指定内核版本,而uname -r是查看内核版本;ARCH指定CPU架构
[backcolor=white !important]----------------------------------------------------------------------
[backcolor=white !important]######为Haproxy提供主配置文件与服务脚本,并将其添加到系统服务
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# mkdir /etc/haproxy
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# cp examples/haproxy.cfg /etc/haproxy
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# cp examples/haproxy.init /etc/init.d/haproxy
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# chmod +x /etc/init.d/haproxy
[backcolor=white !important][iyunv@HA1 haproxy-1.4.24]# chkconfig --add haproxy
[backcolor=white !important]2、修改主配置文件
[backcolor=white !important][iyunv@HA1 ~]# vim /etc/haproxy/haproxy.cfg######创建Haproxy的工作目录
[backcolor=white !important][iyunv@HA1 ~]# mkdir /usr/share/haproxy
[backcolor=white !important]# this config needs haproxy-1.1.28 or haproxy-1.2.1
[backcolor=white !important]global
[backcolor=white !important]    log 127.0.0.1   local0        #日志配置,所有日志都记录在本地,通过local0输出
[backcolor=white !important]    log 127.0.0.1   local1 notice
[backcolor=white !important]    maxconn 25600                 #最大连接数
[backcolor=white !important]    chroot /usr/share/haproxy     #改变Haproxy的工作目录
[backcolor=white !important]    uid 99                        #用户的UID
[backcolor=white !important]    gid 99                        #用户的GID
[backcolor=white !important]    nbproc 1                      #进程数据(可以设置多个)
[backcolor=white !important]    daemon                        #以后台守护进程方式运行Haproxy
[backcolor=white !important]    #debug                        #是否开启调试
[backcolor=white !important]defaults
[backcolor=white !important]    log global         
[backcolor=white !important]    mode    http                  #默认使用协议,可以为{http|tcp|health} http:是七层协议 tcp:是四层 health:只返回OK
[backcolor=white !important]    option  httplog               #详细记录http日志
[backcolor=white !important]    option  dontlognull           #不记录健康检查的日志信息
[backcolor=white !important]    retries 3                     #3次连接失败则认为服务不可用
[backcolor=white !important]    option  redispatch            #ServerID对应的服务器宕机后,强制定向到其他运行正常的服务器
[backcolor=white !important]    maxconn 30000                 #默认的最大连接数
[backcolor=white !important]    contimeout  5000              #连接超时
[backcolor=white !important]    clitimeout  50000             #客户端超时
[backcolor=white !important]    srvtimeout  50000             #服务器超时
[backcolor=white !important]    timeout check   1s            #心跳检测超时
[backcolor=white !important]    timeout http-request    10s   #默认http请求超时时间
[backcolor=white !important]    timeout queue           1m    #默认队列超时时间
[backcolor=white !important]    timeout connect         10s   #默认连接超时时间
[backcolor=white !important]    timeout client          1m    #默认客户端超时时间
[backcolor=white !important]    timeout server          1m    #默认服务器超时时间
[backcolor=white !important]    timeout http-keep-alive 10s   #默认持久连接超时时间
[backcolor=white !important]listen  stats
[backcolor=white !important]    mode http
[backcolor=white !important]    bind 0.0.0.0:8090             #指定IP地址与Port
[backcolor=white !important]    stats enable                  #开启Haproxy统计状态
[backcolor=white !important]    stats refresh 3s              #统计页面自动刷新时间间隔
[backcolor=white !important]    stats hide-version            #状态页面不显示版本号
[backcolor=white !important]    stats uri   /allen            #统计页面的uri为"/allen"
[backcolor=white !important]    stats realm Haproxy allen    #统计页面认证时提示内容信息
[backcolor=white !important]    stats auth  admin:admin       #统计页面的用户名与密码
[backcolor=white !important]    stats admin if TRUE           #启用或禁用状态页面
[backcolor=white !important]frontend allen                    #定义前端服务器
[backcolor=white !important]    bind *:80
[backcolor=white !important]    mode http
[backcolor=white !important]    option httpclose              #每次请求完成主动关闭http连接
[backcolor=white !important]    option forwardfor             #后端服务器获取客户端的IP地址,可以从http header中获取
[backcolor=white !important]    acl url_static path_end -i .html .jpg .gif #定义ACL规则以如".html"结尾的文件;-i:忽略大小写
[backcolor=white !important]    acl url_dynamic path_end -i .php
[backcolor=white !important]    default_backend webservers    #客户端访问时默认调用后端服务器地址池
[backcolor=white !important]    use_backend lamp if url_dynamic #调用后端服务器并检查ACL规则是否被匹配
[backcolor=white !important]backend webservers                #定义后端服务器
[backcolor=white !important]    balance roundrobin            #定义算法;基于权重进行轮询
[backcolor=white !important]    server web1 172.16.14.3:80 check rise 2 fall 1 weight 2
[backcolor=white !important]    server web2 172.16.14.4:80 check rise 2 fall 1 weight 2
[backcolor=white !important]backend lamp
[backcolor=white !important]    balance source            #定义算法;源地址hash运算;类似于Nginx的ip_hash
[backcolor=white !important]    server lamp 172.16.14.5:80 check rise 2 fall 1
[backcolor=white !important]----------------------------------------------------------------------
[backcolor=white !important]#####注释:check:启动对后端server的健康状态检测;rise:离线的server转换到正常状态成功检查的次数;fall:确认server从正常状态转换为不可用状态需要检查的次数;weight:权重,数量越大,超重越高
[backcolor=white !important]3、启动Haproxy服务并做访问测试
[backcolor=white !important]1
[backcolor=white !important][iyunv@HA1 ~]# service haproxy start


[backcolor=white !important] 140809101.gif
[backcolor=white !important]4、在HA2服务器上安装Haproxy;这里就不在介绍了,安装与配置方法与在HA1服务器上安装相同

[backcolor=white !important]五、安装配置Keepalived
[backcolor=white !important]1、在HA1与HA2服务器上安装Keepalived
[backcolor=white !important][iyunv@HA1 ~]# yum -y install keepalived
[backcolor=white !important][iyunv@HA2 ~]# yum -y install keepalived
[backcolor=white !important]2、修改HA1服务器的主配置文件
[backcolor=white !important]global_defs {[iyunv@HA1 ~]# vim /etc/keepalived/keepalived.conf
[backcolor=white !important]! Configuration File for keepalived
[backcolor=white !important]   notification_email {
[backcolor=white !important]    root@localhost
[backcolor=white !important]   }
[backcolor=white !important]   notification_email_from admin@allen.com
[backcolor=white !important]   smtp_server 127.0.0.1
[backcolor=white !important]   smtp_connect_timeout 30
[backcolor=white !important]   router_id LVS_ALLEN
[backcolor=white !important]}
[backcolor=white !important]vrrp_script chk_proess {
[backcolor=white !important]    script "killall -0 haproxy"
[backcolor=white !important]    interval 1
[backcolor=white !important]    weight -2
[backcolor=white !important]}
[backcolor=white !important]vrrp_instance ha_1 {
[backcolor=white !important]    state MASTER
[backcolor=white !important]    interface eth0
[backcolor=white !important]    virtual_router_id 56
[backcolor=white !important]    priority 100
[backcolor=white !important]    advert_int 1
[backcolor=white !important]    authentication {
[backcolor=white !important]        auth_type PASS
[backcolor=white !important]        auth_pass 1056
[backcolor=white !important]    }
[backcolor=white !important]    virtual_ipaddress {
[backcolor=white !important]    172.16.14.10
[backcolor=white !important]    }
[backcolor=white !important]    track_script {
[backcolor=white !important]        chk_proess
[backcolor=white !important]    }
[backcolor=white !important]}
[backcolor=white !important]vrrp_instance ha_2 {
[backcolor=white !important]    state BACKUP
[backcolor=white !important]    interface eth0
[backcolor=white !important]    virtual_router_id 58
[backcolor=white !important]    priority 92
[backcolor=white !important]    advert_int 1
[backcolor=white !important]    authentication {
[backcolor=white !important]        auth_type PASS
[backcolor=white !important]        auth_pass 1058
[backcolor=white !important]    }
[backcolor=white !important]    virtual_ipaddress {
[backcolor=white !important]    172.16.14.11
[backcolor=white !important]    }
[backcolor=white !important]}
[backcolor=white !important]3、修改HA2服务器的主配置文件
[backcolor=white !important]global_defs {[iyunv@HA2 ~]# vim /etc/keepalived/keepalived.conf
[backcolor=white !important]! Configuration File for keepalived
[backcolor=white !important]   notification_email {
[backcolor=white !important]    root@localhost
[backcolor=white !important]   }
[backcolor=white !important]   notification_email_from admin@allen.com
[backcolor=white !important]   smtp_server 127.0.0.1
[backcolor=white !important]   smtp_connect_timeout 30
[backcolor=white !important]   router_id LVS_ALLEN
[backcolor=white !important]}
[backcolor=white !important]vrrp_script chk_proess {
[backcolor=white !important]    script "killall -0 haproxy"
[backcolor=white !important]    interval 1
[backcolor=white !important]    weight -2
[backcolor=white !important]}
[backcolor=white !important]vrrp_instance ha_1 {
[backcolor=white !important]    state BACKUP
[backcolor=white !important]    interface eth0
[backcolor=white !important]    virtual_router_id 56
[backcolor=white !important]    priority 99
[backcolor=white !important]    advert_int 1
[backcolor=white !important]    authentication {
[backcolor=white !important]        auth_type PASS
[backcolor=white !important]        auth_pass 1056
[backcolor=white !important]    }
[backcolor=white !important]    virtual_ipaddress {
[backcolor=white !important]    172.16.14.10
[backcolor=white !important]    }
[backcolor=white !important]}
[backcolor=white !important]vrrp_instance ha_2 {
[backcolor=white !important]    state MASTER
[backcolor=white !important]    interface eth0
[backcolor=white !important]    virtual_router_id 58
[backcolor=white !important]    priority 93
[backcolor=white !important]    advert_int 1
[backcolor=white !important]    authentication {
[backcolor=white !important]        auth_type PASS
[backcolor=white !important]        auth_pass 1058
[backcolor=white !important]    }
[backcolor=white !important]    virtual_ipaddress {
[backcolor=white !important]    172.16.14.11
[backcolor=white !important]    }
[backcolor=white !important]    track_script {
[backcolor=white !important]        chk_proess
[backcolor=white !important]    }
[backcolor=white !important]}
[backcolor=white !important]4、启动Keepalived服务并查看HA1与HA2服务器上的虚拟IP地址
[backcolor=white !important]2: eth0:
mtu 1500 qdisc pfifo_fast state UP qlen 1000[backcolor=white !important][iyunv@HA1 ~]# service keepalived start
[backcolor=white !important][iyunv@HA1 ~]# ip addr show eth0
[backcolor=white !important]    link/ether 00:0c:29:2c:1a:24 brd ff:ff:ff:ff:ff:ff
[backcolor=white !important]    inet 172.16.14.1/16 brd 172.16.255.255 scope global eth0
[backcolor=white !important]    inet 172.16.14.10/32 scope global eth0
[backcolor=white !important]    inet6 fe80::20c:29ff:fe2c:1a24/64 scope link
[backcolor=white !important]       valid_lft forever preferred_lft forever
[backcolor=white !important]------------------------------------------------------------------------
[backcolor=white !important][iyunv@HA2 ~]# service keepalived start
[backcolor=white !important][iyunv@HA2 ~]# ip addr show eth0
[backcolor=white !important]2: eth0:
mtu 1500 qdisc pfifo_fast state UP qlen 1000
[backcolor=white !important]    link/ether 00:0c:29:ec:f6:3f brd ff:ff:ff:ff:ff:ff
[backcolor=white !important]    inet 172.16.14.2/16 brd 172.16.255.255 scope global eth0
[backcolor=white !important]    inet 172.16.14.11/32 scope global eth0
[backcolor=white !important]    inet6 fe80::20c:29ff:feec:f63f/64 scope link
[backcolor=white !important]       valid_lft forever preferred_lft forever



[backcolor=white !important]六、验证服务
[backcolor=white !important]1、访问验证服务器的负载均衡功能
[backcolor=white !important] 155246853.gif
[backcolor=white !important] 155249914.gif
[backcolor=white !important]2、验证是否实现动、静分离的效果
[backcolor=white !important] 155550444.gif
[backcolor=white !important]3、假设前端服务器其中一台出现了故障,验证IP地址能否自动切换到备份服务器上


[backcolor=white !important]
######停止HA1服务器的haproxy服务[iyunv@HA1 ~]# service haproxy stop------------------------------------------------------------------------######查看HA2服务器的IP地址[iyunv@HA2 ~]# ip addr show eth02: eth0:
mtu 1500 qdisc pfifo_fast state UP qlen 1000    link/ether 00:0c:29:ec:f6:3f brd ff:ff:ff:ff:ff:ff    inet 172.16.14.2/16 brd 172.16.255.255 scope global eth0    inet 172.16.14.11/32 scope global eth0    inet 172.16.14.10/32 scope global eth0    inet6 fe80::20c:29ff:feec:f63f/64 scope link       valid_lft forever preferred_lft forever注释:由上可见,虚拟IP地址已成功切换到HA2服务器
[backcolor=white !important]4、假如这里将服务器修复好重新上线,IP地址会切换回到原来的服务器,这里就不在验证;将HA2服务器上的haproxy或keepalived服务关闭亦是如此

[backcolor=white !important]到此Keepalived+Haproxy实现负载均衡及动静分离已完成;后续博客会更新其他相关内容,敬请关注...



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-9605-1-1.html 上篇帖子: haproxy 配置文件解析 下篇帖子: keepalived+haproxy(SSL)实现web高可用(双主模式)

尚未签到

发表于 2013-10-8 11:51:13 | 显示全部楼层
我是个凑数的。。。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-10-16 21:22:26 | 显示全部楼层
我的id是假冒的,大家不要相信我是骗子。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-10-23 09:04:58 | 显示全部楼层
死亡教会人一切,如同考试之后公布的结果——虽然恍然大悟,但为时晚矣~!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-11-2 06:28:11 | 显示全部楼层
人生不能像做菜、把所有的料都准备好才下锅!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-11-20 20:18:00 | 显示全部楼层
男人与女人,终究也只是欲望的动物吧!真的可以因为爱而结合吗?对不起,我也不知道。。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-12-7 08:38:12 | 显示全部楼层
爱情像天平,当你跳下去的时候,我会摔的更痛

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表