设为首页 收藏本站
查看: 1046|回复: 0

[经验分享] mysql主从、主主复制及高可用性

[复制链接]

尚未签到

发表于 2018-9-29 09:12:15 | 显示全部楼层 |阅读模式
  mysql主从、主主复制及高可用性
  一:MySQL复制:
  mysql复制简介:
  将master服务器中主数据库的ddl和dml操作通过二进制日志传到slaves服务器上,然后在master服务器上将这些日志文件重新执行,从而使得slave服务器和master服务器上的数据信息保持同步。
  Mysql复制的原理:

  •   将数据分布到多个系统上去,是通过将Mysql的某一台master主机的数据复制到其它(slave)主机上,并重新执行一遍来实现的;
  •   复制过程中一个服务器充当master服务器,而一台或多台其它服务器充当slave服务器。master服务器将更新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环。
  •   这些日志可以记录发送到slave服务器的更新。当一个slaves服务器连接master服务器时,它通知master服务器从服务器在日志中读取的最后一次成功更新的位置。slave服务器接收从那时起发生的任何更新,然后封锁并等待master服务器通知新的更新。
  mysql复制的优点:

  •   在slave服务器上执行查询操作,降低master服务器的访问压力
  •   当master服务器上出现了问题可以切换到slave服务器上,不会造成访问中断等问题
  •   在slave服务器上进行备份,以避免备份期间影响master服务器的服务使用及日常访问
  Mysql自身的复制功能:是构建大型、高性能应用程序的基础。
  mysql支持的复制类型

  •   基于语句的复制:在主服务器上执行的SQL语句,在从服务器上执行同样的语句。MySQL默认采用基于语句的复制,效率比较高。一旦发现没法精确复制时,会自动选着基于行的复制。
  •   基于行的复制:把改变的内容复制过去,而不是把命令在从服务器上执行一遍. 从mysql5.0开始支持
  •   混合类型的复制::默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制。
  MySQL复制技术的特点:

  •   数据分布 (Data distribution )
  •   备份(Backups)
  •   负载平衡(load balancing)
  •   高可用性和容错性 High availability and failover
  复制的工作过程:

  •   master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events);
  •   slave将master的binary log events拷贝到它的中继日志(relay log);
  •   slave重做中继日志中的事件,将改变反映它自己的数据。
DSC0000.jpg

  第一步:master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务串行的写入二进制日志,即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后,master通知存储引擎提交事务;
  第二步:slave将master的binary log拷贝到自己的中继日志。首先,slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志;
  第三步:SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。
  二:mysql主从、主主复制:
  实验拓扑:
DSC0001.png

  1.在两台服务器上分别安装mysql(源码安装所依赖的包为perl-DBD-MySQL、mysql-server):
DSC0002.png

DSC0003.png

  2.分别启动mysql和mysql2两台服务器,并设置开机启动:
DSC0004.png

DSC0005.png

  3.修改/etc/my.cnf配置文件:
  vi /etc/my.cnf
  添加如下内容:
  [mysqld]
  log-bin=MySQL-bin        ###启用二进制日志
  server-id=1                    ###数据库ID号,1:表示为Master;master_id范围:1到231之间的正整数值;每个同步服务器都必须设定一个唯一的编号,否则同步无法正常运行。
DSC0006.png

  在服务器mysql2中只需要修改server-id数据库ID号即可:
DSC0007.png

  分别重新启动两台服务器的mysqld服务:
DSC0008.png

DSC0009.png

  1、mysql和mysql2服务器相互设置为主从同步:
  a.在主mysql服务器上的设置:
  在数据库中建立www账号,并且允许从任何地址上来登录,密码是123.asd:
DSC00010.png

  为了使测试成功,所以我这里以清除防火墙为例:
DSC00011.png

DSC00012.png

  b.在主机名为mysql2服务器上的设置:
DSC00013.png

  c.在主机名为mysqld服务器上的my.cnf配置文件中添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库:
DSC00014.png

  d.验证主、从同步:
  首先在主数据库上创建新库“tables”,然后在从数据库上查看新建库是否已同步:
DSC00015.png

  在主机名为mysql2的服务器中验证新建库是否已经同步:
DSC00016.png

  2、mysql和mysql2服务器相互设置为主主同步(在mysql2和msyql上执行相反的操作,使其互为主从):
  在主机名为msyql2服务器上的设置:
DSC00017.png

  在主机名为mysql主机上的设置:
DSC00018.png

  在my.cnf文件中添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库。
  整体配置完成后需要重启mysqld服务
DSC00019.png

  验证主主同步:
DSC00020.png

  会发现在mysql2服务器上的tables库中新建的users表同步到mysql服务器中:
DSC00021.png

  如果主MySQL服务器已经存在,只是后期才搭建从MySQL服务器,在置配数据同步前应先将主MySQL服务器的要同步的数据库拷贝到从MySQL服务器上:
  (如先在主MySQL上备份数据库,再将备份内容在从MySQL服务器上恢复)
  三、MySQL主/从模式高可性群集:
  1.在mysql和mysql2两台服务器上分别安装keepalived软件包:
  安装keepalived软件包与服务控制
  在编译安装Keepalived之前,必须先安装内核开发包kernel-devel以及openssl-devel、popt-devel等支持库(rhel6.0中默认已经安装):
DSC00022.png

  2.编译安装Keepalived:
  使用指定的linux内核位置对keepalived进行配置,并将安装路径指定为根目录,这样就无需额外创建链接文件,配置完成后,依次执行make、make install进行安装。
DSC00023.png

  3.使用keepalived服务:
  执行make install操作之后,会自动生成/etc/init.d/keepalived脚本文件,但还需要手动添加为系统服务,这样就可以使用service、chkconfig工具来对keepalived服务程序进行管理。
DSC00024.png

  4.分别修改mysql和mysql2服务器中的keepalived.conf配置文件:
  mysql服务器上的配置文件内容如下:
  vi /etc/keepalived/keepalived.conf:
  ! Configuration File for keepalived
  global_defs {
  router_id MySQL-HA
  }
  vrrp_instance VI_1 {
  state BACKUP    ###BACKUP将根据优先级决定主或从;MASTER指定为主;SLAVE指定为从.若一方为MASTER,另一方为SLAVE,则表示双机热备(即一主一从).
  interface eth0
  virtual_router_id 51         ###确保和mysql2相同,同网内不同集群此项必须不同,否则发生冲突
  priority 100                    ###此处mysql2上设置为99(比mysql服务器优先级低)
  advert_int 1
  nopreempt                 ###不抢占,只在priority高的mysql上设置,mysql2上此项注释掉
  authentication {
  auth_type PASS
  auth_pass 1111
  }
  virtual_ipaddress {
  192.168.10.100
  }
  }
  virtual_server 192.168.10.100 3306 {
  delay_loop 6
  lb_algo wrr
  lb_kind DR
  persistence_timeout 50
  protocol TCP
  real_server 192.168.10.1 3306 {                ###mysql2上此处改为mysql2服务器的ip地址192.168.10.2
  weight 1
  notify_down /etcl/keepalived/bin/mysql.sh
  TCP_CHECK {
  connect_timeout 3
  nb_get_retry 3
  delay_before_retry 3
  connect_port 3306
  }
  }
  }
  mysql主机上的keepalived.conf文件的具体配置如下:
DSC00025.png

  mysql2主机的keepalived.conf参考上面的描述修改。
  可以使用scp命令把mysql主机上配置好的keepalived.conf文件拷贝到mysql2主机,只要做简单修改即可:
  我这里通过手工修改:
DSC00026.png

  mysql和mysql2上都添加此检测脚本,作用是当mysql停止工作时自动关闭本机的keepalived,从而实现将故障机器剔除(因每台机器上keepalived只添加了本机为realserver):
  当mysqld正常启动起来后,要手动启动keepalived服务。
  vi /etc/keepalived /mysql.sh,脚本内容如下:
DSC00027.png

DSC00028.png

DSC00029.png

DSC00030.png

  5.如果mysql.sh脚本不能正常执行的话,可以编写一个检测mysqld服务的是否正在运行的脚本,如果mysqld服务停止,则在脚本中停掉keepalived服务,实现故障切换。并设置一个cron计划任务定期执行检测脚本。
  在企业网络内配置cacti 或nagios对mysqld服务进行监控,能在第一时间通知管理员mysqld服务出现异常
  vi /etc/rc.local
  modprobe ip_vs ###此模块如果无法自动加载则需手动加载
  mysql和mysql2启动keepalived守护进程.
  /etc/init.d/keepalived start
  6.进行测试:
  在mysql上创建一个测试数据库并在数据库tables库中创建一个www表,此时在mysql2上就会自动同步在mysql上已创建好的库和表;
  同样在mysql2上对数据库或表做任何修改也会同步到mysql上。这说明mysql的主从同步实现了:
DSC00031.png

DSC00032.png

  数据库、表都同步,tables库中的内容自动同步:
DSC00033.png

DSC00034.png

  在mysql和mysql2分别执行ipaddrshow dev eth0命令查看mysql和mysql2对VIP(群集虚拟IP)的控制权:
DSC00035.png

DSC00036.png

  整个环境设置到此完成。


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-603570-1-1.html 上篇帖子: Docker安装MySQL8 下篇帖子: LINUX 下 配置MySQL数据库集群
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表