热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

Mysql主从复制原理

Mysql主从复制原理随着网站业务的不断发展,用户量的不断增加,数据量不断地增长,数据库的访问量也相应的增长,到了一定的时间,网站首先出现的瓶颈就是在数据库层(这里没有将缓存加入进

Mysql 主从复制原理

随着网站业务的不断发展,用户量的不断增加,数据量不断地增长,数据库的访问量也相应的增长,到了一定的时间,网站首先出现的瓶颈就是在数据库层(这里没有将缓存加入进来),这时候就需要对数据库进行适当的拆分,比如说分库或分表等,如果数据库在分库,分表后还是出现瓶颈,这时就好考虑数据库读写分离,尤其在读多写少的时候。

mysql中读写分离的方案就是主从复制,master服务器将更新的记录到binary log中,mysql中这个叫二进制日志事件(binary log events), slaver服务器将master中的binary log events 复制到自己的中继日志(relay log)中,slave服务器将监听中继日志,将中继日志的改变记录到数据库中。下图描述了复制的过程:

技术分享

其中,mysql支持大概3种类型的复制类型:

1.基于语句的复制,(也叫做逻辑复制,logical replication),优点是基于语句的复制的二进制日志可以很好的进行压缩,而且日志的数据量也较小,缺点是基于语句的复制必须是串行化。

2.基于记录的复制(Row-Based Replication),在二进制日志中记录下实际数据的改变,优点就是可以对任何语句都能正确工作,一些语句的效率更高,缺点就是二进制日志会很大,不能使用mysqlbinlog来查看二进制日志.

3.混合类型的复制,默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制.

复制能解决的一些问题:

1.数据分布 (Data distribution )

2.可以实现负载均衡(load balancing),通常所说的读写分离

3.可以实现数据的备份(Backups),但是不能当真正意义上数据备份来用

4.高可用性和容错行(比如双主模型中的互为主从能实现高可用)

但是,主从复制也带来其他一系列其他问题,典型的就是主从不同步,导致主从不同步的原因是 :服务器一般都是多核多线程,导致主节点可以同时执行多条读写操作,而记录二进制日志则必须按顺序有先后的记录,从节点在一条一条复制过去,生成中继日志,再执行语句,这里就会出现复制延迟。其他问题就是写入无法扩展,锁表率上升等。

复制的体系结构有以下一些基本原则:

(1) 每个slave只能有一个master;

(2) 每个slave只能有一个唯一的服务器ID;

(3) 每个master可以有很多slave;

(4) 如果你设置log_slave_updates,slave可以是其它slave的master,从而扩散master的更新

Mysql复制常见的几种模式:

1.一主多从

由一个master和一个slave组成复制系统是最简单的情况。Slave之间并不相互通信,只能与master进行通信。主要用于读压力比较大的应用的数据库端廉价扩展解决方案。

技术分享

2.主主复制

Master-Master复制的两台服务器,既是master,又是另一台服务器的slave。这样,任何一方所做的变更,都会通过复制应用到另外一方的数据库中。在这种复制架构中,各自上运行的不是同一db,比如左边的是db1,右边的是db2,db1的从在右边反之db2的从在左边,两者互为主从,再辅助一些监控的服务还可以实现一定程度上的高可以用。

技术分享

3.主动-被动模式(HA)

这种模式由master-master结构变化而来的,它避免了M-M的缺点,实际上,这是一种具有容错和高可用性的系统。它的不同点在于其中只有一个节点在提供读写服务,另外一个节点时刻准备着,当主节点一旦故障马上接替服务。比如通过corosync+pacemaker+drbd+mysql就可以提供这样一组高可用服务,主备模式下再跟着slave服务器,也可以实现读写分离.

技术分享

主从复制中容易出现的问题:

1.限制从服务器只读,保证主从数据一致。

show global variables like ‘%read%‘

更改slave的全局服务器变量read_only为on

set global read_only on

从节点上授权只读 set global read_Only= 1;如果永久有效更改mysql的my.ini 或my.cnf,在[mysql] 中设置read_Only= 1

2.保证主从复制时的事务安全

如果mysql比较繁忙它会把二进制日志缓存在内存中,不繁忙时才会把他写到磁盘中,前提就是mysql对二进制日志事件数据会缓冲。在master上设置如下参数 set global  sync_binlog = 1 事物一提交,就必须同步二进制日志,这样会降低性能,但是数据非常重要的情况下。

转载请注明文章来源


Mysql 主从复制原理


推荐阅读
  • 本文介绍了lua语言中闭包的特性及其在模式匹配、日期处理、编译和模块化等方面的应用。lua中的闭包是严格遵循词法定界的第一类值,函数可以作为变量自由传递,也可以作为参数传递给其他函数。这些特性使得lua语言具有极大的灵活性,为程序开发带来了便利。 ... [详细]
  • HDU 2372 El Dorado(DP)的最长上升子序列长度求解方法
    本文介绍了解决HDU 2372 El Dorado问题的一种动态规划方法,通过循环k的方式求解最长上升子序列的长度。具体实现过程包括初始化dp数组、读取数列、计算最长上升子序列长度等步骤。 ... [详细]
  • 本文介绍了C#中数据集DataSet对象的使用及相关方法详解,包括DataSet对象的概述、与数据关系对象的互联、Rows集合和Columns集合的组成,以及DataSet对象常用的方法之一——Merge方法的使用。通过本文的阅读,读者可以了解到DataSet对象在C#中的重要性和使用方法。 ... [详细]
  • 本文介绍了OC学习笔记中的@property和@synthesize,包括属性的定义和合成的使用方法。通过示例代码详细讲解了@property和@synthesize的作用和用法。 ... [详细]
  • 本文介绍了在SpringBoot中集成thymeleaf前端模版的配置步骤,包括在application.properties配置文件中添加thymeleaf的配置信息,引入thymeleaf的jar包,以及创建PageController并添加index方法。 ... [详细]
  • 知识图谱——机器大脑中的知识库
    本文介绍了知识图谱在机器大脑中的应用,以及搜索引擎在知识图谱方面的发展。以谷歌知识图谱为例,说明了知识图谱的智能化特点。通过搜索引擎用户可以获取更加智能化的答案,如搜索关键词"Marie Curie",会得到居里夫人的详细信息以及与之相关的历史人物。知识图谱的出现引起了搜索引擎行业的变革,不仅美国的微软必应,中国的百度、搜狗等搜索引擎公司也纷纷推出了自己的知识图谱。 ... [详细]
  • 本文详细介绍了Linux中进程控制块PCBtask_struct结构体的结构和作用,包括进程状态、进程号、待处理信号、进程地址空间、调度标志、锁深度、基本时间片、调度策略以及内存管理信息等方面的内容。阅读本文可以更加深入地了解Linux进程管理的原理和机制。 ... [详细]
  • 后台获取视图对应的字符串
    1.帮助类后台获取视图对应的字符串publicclassViewHelper{将View输出为字符串(注:不会执行对应的ac ... [详细]
  • 《数据结构》学习笔记3——串匹配算法性能评估
    本文主要讨论串匹配算法的性能评估,包括模式匹配、字符种类数量、算法复杂度等内容。通过借助C++中的头文件和库,可以实现对串的匹配操作。其中蛮力算法的复杂度为O(m*n),通过随机取出长度为m的子串作为模式P,在文本T中进行匹配,统计平均复杂度。对于成功和失败的匹配分别进行测试,分析其平均复杂度。详情请参考相关学习资源。 ... [详细]
  • 本文内容为asp.net微信公众平台开发的目录汇总,包括数据库设计、多层架构框架搭建和入口实现、微信消息封装及反射赋值、关注事件、用户记录、回复文本消息、图文消息、服务搭建(接入)、自定义菜单等。同时提供了示例代码和相关的后台管理功能。内容涵盖了多个方面,适合综合运用。 ... [详细]
  • 本文讲述了作者通过点火测试男友的性格和承受能力,以考验婚姻问题。作者故意不安慰男友并再次点火,观察他的反应。这个行为是善意的玩人,旨在了解男友的性格和避免婚姻问题。 ... [详细]
  • 1,关于死锁的理解死锁,我们可以简单的理解为是两个线程同时使用同一资源,两个线程又得不到相应的资源而造成永无相互等待的情况。 2,模拟死锁背景介绍:我们创建一个朋友 ... [详细]
  • 本文介绍了通过ABAP开发往外网发邮件的需求,并提供了配置和代码整理的资料。其中包括了配置SAP邮件服务器的步骤和ABAP写发送邮件代码的过程。通过RZ10配置参数和icm/server_port_1的设定,可以实现向Sap User和外部邮件发送邮件的功能。希望对需要的开发人员有帮助。摘要长度:184字。 ... [详细]
  • 动态规划算法的基本步骤及最长递增子序列问题详解
    本文详细介绍了动态规划算法的基本步骤,包括划分阶段、选择状态、决策和状态转移方程,并以最长递增子序列问题为例进行了详细解析。动态规划算法的有效性依赖于问题本身所具有的最优子结构性质和子问题重叠性质。通过将子问题的解保存在一个表中,在以后尽可能多地利用这些子问题的解,从而提高算法的效率。 ... [详细]
  • Java验证码——kaptcha的使用配置及样式
    本文介绍了如何使用kaptcha库来实现Java验证码的配置和样式设置,包括pom.xml的依赖配置和web.xml中servlet的配置。 ... [详细]
author-avatar
去弥O补从前所有不完整
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有