热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

MySQL高可用性―keepalived+mysql双主(有详细步骤和全部配置项解释)

博主QQ:819594300博客地址:http:zpf666.blog.51cto.com有什么疑问的朋友可以联系博主,博主会帮你们解答,谢谢支持!前言:生产环境中一台mysql主机

博主QQ:819594300

博客地址:http://zpf666.blog.51cto.com/

有什么疑问的朋友可以联系博主,博主会帮你们解答,谢谢支持!

前言:生产环境中一台mysql主机存在单点故障,所以我们要确保mysql的高可用性,即两台MySQL服务器如果其中有一台MySQL服务器挂掉后,另外一台能立马接替其进行工作。

MySQL的高可用方案一般有如下几种:

keepalived+双主,MHA,PXC,MMM,Heartbeat+DRBD等,比较常用的是keepalived+双主,MHA和PXC。

本节主要介绍了利用 keepalived 实现 MySQL 数据库的高可用。

Keepalived+mysql双主来实现MySQL-HA,我们必须保证两台MySQL数据库的数据完全一样,基本思路是两台MySQL互为主从关系,通过Keepalived配置虚拟IP,实现当其中的一台MySQL数据库宕机后,应用能够自动切换到另外一台MySQL数据库,保证系统的高可用。

拓扑环境

OS:centos7.2x86_64

Mysql版本:mysql5.7.13

Keepalived: keepalived-1.2.20

Mysql-vip:192.168.1.150

Mysql-master1:192.168.1.100

Mysql-master2:192.168.1.200

一、   配置两台mysql主主同步

wKiom1jnLHuR3l7HAAHYSz089fw044.jpg

该过程的第一部分就是master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务写入二进制日志。在事件写入二进制日志完成后,master通知存储引擎提交事务。

下一步就是slave将master的binarylog拷贝到它自己的中继日志。首先,slave开始一个工作线程――I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件,如果已经同步了master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。

SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。

主主同步就是两台机器互为主的关系,在任何一台机器上写入都会同步。

若mysql主机开启了防火墙,需要关闭防火墙或创建规则

实验具体过程如下:

1、修改MySQL配置文件

wKiom1jnLIey1ApkAAPgbbhDvwo982.jpg

wKioL1jnLJCDQWtvAAMYwyVd-oc720.jpg

注意:mysql1和mysql只有server-id不同和auto-increment-offset不同,其他必须相同。

部分配置项解释如下

binlog_format= mixed:指定mysql的binlog日志的格式,mixed是混合模式。

relay-log:开启中继日志功能

relay-log-index:中继日志清单

auto-increment-increment= 2:表示自增长字段每次递增的量,其默认值是1。它的值应设为整个结构中服务器的总数,本案例用到两台服务器,所以值设为2。

auto-increment-offset= 2:用来设定数据库中自动增长的起点(即初始值),因为这两能服务器都设定了一次自动增长值2,所以它们的起点必须得不同,这样才能避免两台服务器数据同步时出现主键冲突。

注:另外还可以在my.cnf配置文件中,添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库。如果配置了这个配置项,如果没添加在该配置项后面的数据库,则binlog不记录它的事件。

2、将mysql1设为mysql2的主服务器

在mysql1主机上创建授权账户,允许在mysql2(192.168.1.200)主机上连接

wKioL1jnLJGgbqmKAAC60NyNk-A967.jpg

查看mysql1的当前binlog状态信息:

wKiom1jnLJPAISjhAADr3DabXe8300.jpg

在mysql2上将mysql1设为自已的主服务器并开启slave功能:

wKiom1jnLJaC1RRIAADrr-KsmSE920.jpg

下面看一看mysql2的状态:

wKioL1jnLJ2g1CLhAALhaSE39eE948.jpg

wKiom1jnLJ_BLHK5AAC94hdtBQQ794.jpg

在mysql1防火墙上开启3306/tcp例外:

wKiom1jnLKLBx7TmAAEVHooj98k364.jpg

顺道把mysql2的防火墙也开启3306/tcp例外,反正后面实验还是要开,那就现在一道开了吧:

wKioL1jnLKaA03eQAAErx1O-rno921.jpg

再次查看mysql2的状态:

wKiom1jnLK2DcGcKAAISmuwZaNs964.jpg

wKiom1jnLK2CaaEQAADnRPu3QrA960.jpg

更换mysql2的UUID号:

wKioL1jnLK2R4MlgAAHc_Bc8c8E991.jpg

修改完UUID必须重启mysqld服务才能生效:

wKiom1jnLK6TLZzSAAExMKaDPM4413.jpg

这次再来查看mysql2的状态:

wKioL1jnLK-TTZwkAAJU4I82V9c066.jpg

3、现在反过来・,再将mysql2设为mysql1的主服务器

在mysql2主机上创建授权账户,允许在mysql1(192.168.1.100)主机上连接

wKioL1jnLK-i0v6hAAC4h5C1iHQ170.jpg

查看mysql2的当前binlog状态信息:

wKiom1jnLLDgIaGrAADlVt7630A610.jpg

在mysql1上将mysql2设为自已的主服务器并开启slave功能:

wKioL1jnLLDRV4z_AADl5W2gM4M735.jpg

查看mysql1的状态:

wKiom1jnLLHD9XJXAAJfFeYTHK8663.jpg

4、测试主主同步

在mysql1上创建要同步的数据库如bdqn,并在bdqn中创建一张测试表叫it

wKioL1jnLLHQf1HUAAFMrZIy6vI976.jpg

查看mysql2主机是否同步了mysql1上的数据变化:

wKiom1jnLLLC8v1rAAHqIozz_CA612.jpg

从上图可以看出mysql2同步了mysql1的数据变化

现在往mysql2主机上向it表中插入两行数据:

wKiom1jnLLLDwwu3AAH9V7F283s122.jpg

查看mysql1主机是否同步了mysql2上的数据变化:

wKioL1jnLLKw2CR8AAGRKIpxkQ8557.jpg

总结:至此现在任何一台MySQL上更新数据都会同步到另一台MySQL,MySQL同步完成。

注意:若主MYSQL服务器已经存在,只是后期才搭建从MYSQL服务器,在置配数据同步前应先将主MYSQL服务器的要同步的数据库拷贝到从MYSQL服务器上(如先在主MYSQL上备份数据库,再用备份在从MYSQL服务器上恢复)

 


下面我们就完成keepalived的高可用性:

说明:keepalived是集群管理中保证集群高可用的一个软件解决方案,其功能类似于heartbeat,用来防止单点故障

keepalived是以VRRP协议为实现基础的,VRRP全称VirtualRouter Redundancy Protocol,即虚拟路由冗余协议。

虚拟路由冗余协议,可以认为是实现路由器高可用的协议,即将N台提供相同功能的路由器组成一个路由器组,这个组里面有一个master和多个backup,master上面有一个对外提供服务的vip,master会发组播(组播地址为224.0.0.18),当backup收不到vrrp包时就认为master宕掉了,这时就需要根据VRRP的优先级来选举一个backup当master,这样的话就可以保证路由器的高可用了

keepalived主要有三个模块,分别是core 、check和vrrp。core模块为keepalived的核心,负责主进程的启动、维护以及全局配置文件的加载和解析。check负责健康检查,包括常见的各种检查方式。vrrp模块是来实现VRRP协议的。

 

二、keepalived的安装配置

1、在mysql1和mysql2两台服务器上安装keepalived的几个依赖包

wKiom1jnLLORWQJwAAB1GsjZ0RM267.jpg

注意:如不知道keepalived需要哪些依赖包,可到下载后的源码解压目录下查看INSTALL 文件内容,安装需要的依赖包,源码安装任何一个软件都要养成查看源码包文档的习惯,比如INSTALL,README,doc等文档,可以获得很多有用的信息。

下面我们来看一看keepalived的INSTALL文件:

wKioL1jnLLOxEGWSAAF6gWxpz_8831.jpg

2、在两台mysql上都开始解压缩编译安装keepalived

wKioL1jnLLOzz6n0AADPbqZQxVE640.jpg

:如果你使用的是centos6.5版本,则配置编译装的时候要这样写,如下图所示:

wKiom1jnLLTT05AgAACmwUh0ouU884.jpg

3、执行make install操作之后,会自动生成/etc/init.d/keepalived脚本文件,但还需要手动添加为系统服务,这样就可以使用service、chkconfig工具来对keepalived服务程序进行管理了。

wKiom1jnLLTDedvJAAESpUpb7XA654.jpg

                                                  yum -y install ipvsadm

4、若开启了防火墙,则需要关闭防火墙或者建富策略(现实生产环境中,都不允许关防火墙的,所以我们还是建富策略为第一选择)(两台mysql都需要操作)

wKioL1jnLLSA8xeUAACaeQKSKVM344.jpg

5、修改keepalived的配置文件

说明:keepalived只有一个配置文件keepalived.conf,里面主要包括以下几个配置区域,分别是:

global_defs、vrrp_instance和virtual_server。

  • global_defs:主要是配置故障发生时的通知对象以及机器标识。

  • vrrp_instance:用来定义对外提供服务的VIP区域及其相关属性。

  • virtual_server:虚拟服务器定义

wKiom1jnLLWCTZqjAAEhFi9071s627.jpg

wKiom1jnLLWzzwNCAAK3OBVf8iQ452.jpg

看不清截图的可以看下面的粘贴的文字:

! Configuration File for keepalived

 

global_defs {

  router_id mysql-1

}

 

vrrp_instance VI_1 {

   state BACKUP

   interface eno16777736

   virtual_router_id 51

   priority 100

   advert_int 1

   nopreempt

   authentication {

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {

       192.168.1.150

   }

}

 

virtual_server 192.168.1.150 3306 {

   delay_loop 2

   lb_algo rr

   lb_kind DR

   persistence_timeout 60

   protocol TCP

 

   real_server 192.168.1.100 3306 {

       weight 3

       notify_down    /etc/keepalived/bin/mysql.sh

       TCP_CHECK {

            connect_timeout 3

            nb_get_retry 3

            delay_before_retry 3

            connect_port 3306

       }

   }

}

每个配置项的解释如下:

wKioL1jnLLbwBLWJAAND2YVoXRM716.jpg

wKioL1jnLODheqrjAANF2XgFeuc652.jpg

同样的也需要修改mysql2的keepalived配置文件(下图中绿色部分为和mysql1不一样的地方)

可以使用scp命令把mysql1主机上配置好的keepalived.conf文件拷贝到server2主机,只需要改绿色部分即可:

wKiom1jnLOGw8qmPAAH_RyWHGjY216.jpg

6、启动keepalived服务(两台都要启动)

wKioL1jnLOHhuzIkAACMRtWOZDE239.jpg

7、mysql1和mysql2上都需要添加检测脚本

作用:是当mysql停止工作时自动关闭本机的keeplived,从而实现将故障主机踢出热备组,因每台机器上keepalived只添加了本机为realserver,所以当mysqld正常启动后,我们还需要手动启动keepalived服务。

wKioL1jnLOHDYjlGAADV21Ou_V0874.jpg

wKiom1jnLOKT0amfAADeX5kw9Nw004.jpg

8、给mysql.sh脚本赋予可执行权限(两台mysql都操作同样的步骤)

wKioL1jnLOLjBpjgAACjKpZRP_s633.jpg

9、在mysql1和mysql2上分别执行ip addr show dev eno16777736命令查看mysql1和mysql2对VIP(群集虚拟IP)的控制权

wKioL1jnLObRO7kAAAFZrDE0A4I304.jpg

wKiom1jnLOijvuALAAEc-Tbq9lQ042.jpg

从上图可以看出mysql1是master,mysql2是slave。

10、停止mysql1的mysql服务,看keepalived健康检查程序是否会触发了我们编写的脚本,进行自动故障切换

wKioL1jnLOryIVO7AAEMVrMAETs562.jpg

wKioL1jnLO6DeS-AAAFTTbamlgs692.jpg

从上图可以说明在master服务器的mysql服务发生故障时,mysql1主机触发了我们编写的脚本,发生了自动故障切换。

11、现在我们把mysql1的mysql服务开起来,并且keepalived的服务也需要手动开启

wKiom1jnLPLg6lOkAAEIC75-c1Q029.jpg

12、我们再次在两台mysql服务器上用ip addr show dev eno16777736命令看一下

wKiom1jnLPWAmum_AAErgsnHOm8188.jpg

wKioL1jnLPiQg3zqAAFep6K1b9E362.jpg

从上面两张图可以看出,即便mysql1的mysql服务和keepalived服务都重新开启了,mysql2仍然是master了,mysql1抢不回去master的权利了,说明我们设置的nopreempt配置生效了,在生产环境中就需要添加不抢占配置,保证了群集稳定性,只有当mysql2的mysql服务坏掉的时候,mysql1才会再次成为master,否则它永远只能当mysql2的备份。(:nopreempt一般是在优先级高的mysql上设置)

13、我们找一台安装有MySQL客户端,然后登录VIP,看是否能登录,在登录之前两台MySQL服务器都要授权允许从远程登录

wKiom1jnLPyR1HyPAAFujBaMMSk453.jpg

在客户端上登陆:

wKioL1jnLQGhXoXFAAIy3pt7jiE132.jpg

上图显示说明在客户端访问VIP地址,由mysql2主机提供响应的,因为mysql2当前是主服务器,将mysql2的mysql服务停止,在客户端执行show  variables like‘server_id’;

wKioL1jnLQOSpPe5AAD_D8pVJ78849.jpg

wKioL1jnLQqA5m4PAAIYqzox4XI257.jpg

上图显示说明在客户端的查询请求是由mysql1主机响应的,故障切换成功。

 

总结:

Keepalived+mysql双主一般来说,中小型规模的时候,采用这种架构是最省事的。

在master节点发生故障后,利用keepalived的高可用机制实现快速切换到备用节点。

在这个方案里,有几个需要注意的地方:

1.采用keepalived作为高可用方案时,两个节点最好都设置成BACKUP模式,避免因为意外情况下(比如脑裂)相互抢占导致往两个节点写入相同数据而引发冲突;

2.把两个节点的auto_increment_increment(自增步长)和auto_increment_offset(自增起始值)设成不同值。其目的是为了避免master节点意外宕机时,可能会有部分binlog未能及时复制到slave上被应用,从而会导致slave新写入数据的自增值和原先master上冲突了,因此一开始就使其错开;当然了,如果有合适的容错机制能解决主从自增ID冲突的话,也可以不这么做;

3.slave节点服务器配置不要太差,否则更容易导致复制延迟。作为热备节点的slave服务器,硬件配置不能低于master节点;

4.如果对延迟问题很敏感的话,可考虑使用MariaDB分支版本,或者直接上线MySQL 5.7最新版本,利用多线程复制的方式可以很大程度降低复制延迟;



推荐阅读
  • 本文介绍了在开发Android新闻App时,搭建本地服务器的步骤。通过使用XAMPP软件,可以一键式搭建起开发环境,包括Apache、MySQL、PHP、PERL。在本地服务器上新建数据库和表,并设置相应的属性。最后,给出了创建new表的SQL语句。这个教程适合初学者参考。 ... [详细]
  • 搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的详细步骤
    本文详细介绍了搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的步骤,包括环境说明、相关软件下载的地址以及所需的插件下载地址。 ... [详细]
  • PHP设置MySQL字符集的方法及使用mysqli_set_charset函数
    本文介绍了PHP设置MySQL字符集的方法,详细介绍了使用mysqli_set_charset函数来规定与数据库服务器进行数据传送时要使用的字符集。通过示例代码演示了如何设置默认客户端字符集。 ... [详细]
  • 本文介绍了如何使用php限制数据库插入的条数并显示每次插入数据库之间的数据数目,以及避免重复提交的方法。同时还介绍了如何限制某一个数据库用户的并发连接数,以及设置数据库的连接数和连接超时时间的方法。最后提供了一些关于浏览器在线用户数和数据库连接数量比例的参考值。 ... [详细]
  • [译]技术公司十年经验的职场生涯回顾
    本文是一位在技术公司工作十年的职场人士对自己职业生涯的总结回顾。她的职业规划与众不同,令人深思又有趣。其中涉及到的内容有机器学习、创新创业以及引用了女性主义者在TED演讲中的部分讲义。文章表达了对职业生涯的愿望和希望,认为人类有能力不断改善自己。 ... [详细]
  • 解决VS写C#项目导入MySQL数据源报错“You have a usable connection already”问题的正确方法
    本文介绍了在VS写C#项目导入MySQL数据源时出现报错“You have a usable connection already”的问题,并给出了正确的解决方法。详细描述了问题的出现情况和报错信息,并提供了解决该问题的步骤和注意事项。 ... [详细]
  • 本文讨论了在手机移动端如何使用HTML5和JavaScript实现视频上传并压缩视频质量,或者降低手机摄像头拍摄质量的问题。作者指出HTML5和JavaScript无法直接压缩视频,只能通过将视频传送到服务器端由后端进行压缩。对于控制相机拍摄质量,只有使用JAVA编写Android客户端才能实现压缩。此外,作者还解释了在交作业时使用zip格式压缩包导致CSS文件和图片音乐丢失的原因,并提供了解决方法。最后,作者还介绍了一个用于处理图片的类,可以实现图片剪裁处理和生成缩略图的功能。 ... [详细]
  • 本文详细介绍了SQL日志收缩的方法,包括截断日志和删除不需要的旧日志记录。通过备份日志和使用DBCC SHRINKFILE命令可以实现日志的收缩。同时,还介绍了截断日志的原理和注意事项,包括不能截断事务日志的活动部分和MinLSN的确定方法。通过本文的方法,可以有效减小逻辑日志的大小,提高数据库的性能。 ... [详细]
  • IhaveconfiguredanactionforaremotenotificationwhenitarrivestomyiOsapp.Iwanttwodiff ... [详细]
  • 本文介绍了Hyperledger Fabric外部链码构建与运行的相关知识,包括在Hyperledger Fabric 2.0版本之前链码构建和运行的困难性,外部构建模式的实现原理以及外部构建和运行API的使用方法。通过本文的介绍,读者可以了解到如何利用外部构建和运行的方式来实现链码的构建和运行,并且不再受限于特定的语言和部署环境。 ... [详细]
  • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
    本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
  • 本文介绍了RPC框架Thrift的安装环境变量配置与第一个实例,讲解了RPC的概念以及如何解决跨语言、c++客户端、web服务端、远程调用等需求。Thrift开发方便上手快,性能和稳定性也不错,适合初学者学习和使用。 ... [详细]
  • Redis底层数据结构之压缩列表的介绍及实现原理
    本文介绍了Redis底层数据结构之压缩列表的概念、实现原理以及使用场景。压缩列表是Redis为了节约内存而开发的一种顺序数据结构,由特殊编码的连续内存块组成。文章详细解释了压缩列表的构成和各个属性的含义,以及如何通过指针来计算表尾节点的地址。压缩列表适用于列表键和哈希键中只包含少量小整数值和短字符串的情况。通过使用压缩列表,可以有效减少内存占用,提升Redis的性能。 ... [详细]
  • 突破MIUI14限制,自定义胶囊图标、大图标样式,支持任意APP
    本文介绍了如何突破MIUI14的限制,实现自定义胶囊图标和大图标样式,并支持任意APP。需要一定的动手能力和主题设计师账号权限或者会主题pojie。详细步骤包括应用包名获取、素材制作和封包获取等。 ... [详细]
  • 一句话解决高并发的核心原则
    本文介绍了解决高并发的核心原则,即将用户访问请求尽量往前推,避免访问CDN、静态服务器、动态服务器、数据库和存储,从而实现高性能、高并发、高可扩展的网站架构。同时提到了Google的成功案例,以及适用于千万级别PV站和亿级PV网站的架构层次。 ... [详细]
author-avatar
茶不离
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有