位置: 编程技术 - 正文

MySQL主从同步原理介绍

编辑:rootadmin

推荐整理分享MySQL主从同步原理介绍,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

概述

Mysql的Replication(复制)是一个异步的复制过程,从一个 Mysql instance(我们称之为 Master)复制到另一个Mysql instance(我们称之 Slave)。在 Master 与 Slave之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在Master端。

主从同步需求

要实现 MySQL 的 Replication ,首先必须打开 Master 端的BinaryLog(mysql-bin.xxxxxx)功能,否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin” 参数选项,或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin” 参数项。

主从同步过程

MySQL 复制的基本过程如下:

MySQL主从同步原理介绍

1.Slave上面的IO线程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2.Master接收到来自Slave的IO线程的请求后,通过负责复制的IO线程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave端的 IO线程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master端的Binary Log文件的名称以及在Binary Log中的位置;3.Slave的IO线程接收到信息后,将接收到的日志内容依次写入到 Slave 端的RelayLog文件(mysql-relay-bin.xxxxxx)的最末端,并将读取到的Master端的bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”。4.Slave的SQL线程检测到Relay Log中新增加了内容后,会马上解析该Log文件中的内容成为在Master 端真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master端和Slave端执行了同样的Query,所以两端的数据是完全一样的。

实际上,在老版本中,MySQL 的复制实现在 Slave 端并不是由 SQL 线程和 IO线程这两个线程共同协作而完成的,而是由单独的一个线程来完成所有的工作。但是 MySQL的工程师们很快发现,这样做存在很大的风险和性能问题,主要如下:

1.首先,如果通过一个单一的线程来独立实现这个工作的话,就使复制 Master 端的,BinaryLog日志,以及解析这些日志,然后再在自身执行的这个过程成为一个串行的过程,性能自然会受到较大的限制,这种架构下的Replication 的延迟自然就比较长了。

3.其次,Slave 端的这个复制线程从 Master 端获取 Binary Log 过来之后,需要接着解析这些内容,还原成Master 端所执行的原始 Query,然后在自身执行。在这个过程中,Master端很可能又已经产生了大量的变化并生成了大量的Binary Log 信息。如果在这个阶段 Master端的存储系统出现了无法修复的故障,那么在这个阶段所产生的所有变更都将永远的丢失,无法再找回来。这种潜在风险在Slave端压力比较大的时候尤其突出,因为如果 Slave压力比较大,解析日志以及应用这些日志所花费的时间自然就会更长一些,可能丢失的数据也就会更多。

所以,在后期的改造中,新版本的 MySQL 为了尽量减小这个风险,并提高复制的性能,将 Slave端的复制改为两个线程来完成,也就是前面所提到的 SQL 线程和 IO线程。最早提出这个改进方案的是Yahoo!的一位工程师“JeremyZawodny”。通过这样的改造,这样既在很大程度上解决了性能问题,缩短了异步的延时时间,同时也减少了潜在的数据丢失量。

当然,即使是换成了现在这样两个线程来协作处理之后,同样也还是存在 Slave数据延时以及数据丢失的可能性的,毕竟这个复制是异步的。只要数据的更改不是在一个事务中,这些问题都是存在的。

总结

初步了解了MySQL主从复制的原理。

MySQL开启记录执行过的SQL语句方法 概述很多时候,我们需要知道MySQL执行过哪些SQL语句,比如MySQL被注入后,需要知道造成什么伤害等等。只要有SQL语句的记录,就能知道情况并作出对策

MySQL分页技术、6种分页方法总结 概述有朋友问:MySQL的分页似乎一直是个问题,有什么优化方法吗?网上看到赶集网XX推荐了一些分页方法,但似乎不太可行,你能点评一下吗?方法总结

在CentOS上安装phpMyAdmin的教程 前提在CentOS上安装phpMyAdmin,你第一步需要架设一台Web服务器(如Apache或nginx),安装好MySQL/MariaDB数据库和PHP。根据你的偏好和需求,你可以从LAMP和LEMP中选

标签: MySQL主从同步原理介绍

本文链接地址:https://www.jiuchutong.com/biancheng/347660.html 转载请保留说明!

上一篇:MySQL日志文件详解(mysql日志记录)

下一篇:MySQL开启记录执行过的SQL语句方法(查看mysql执行sql日志内容)

  • 个人独资企业需要报税吗
  • 小规模纳税人单张发票最大金额
  • 空壳公司如何报税
  • 2019所得税新政策
  • 购买树木计入什么科目
  • 自然灾害导致的车损可以理赔嘛
  • 新企业第一次报所得税
  • 政策性搬迁损失赔偿标准
  • 商业保理公司票据贴现账务处理
  • 发包工程会计账务处理
  • 成本跨年如何处理
  • 承兑贴现给个人怎么做账
  • 购买商品赠送
  • 进项发票失控账务处理
  • 政府发的补助金用不用交税
  • 营改增后房地产公司税种及税率
  • 原材料暂估分录
  • 小规模纳税人税率有几种
  • 组织机构代码证过期
  • 醋开票属于什么类
  • 个体纳税申报核定销售额填不填
  • 残保金补报
  • 居民企业非货币性资产投资、转让所得如何缴税?
  • 不动产测绘费谁交
  • 服务性行业受气
  • 企业实缴出资额怎么查
  • 哪些发票备注栏必须注明
  • 小规模纳税人不开票收入填在哪里
  • 增值税的附加税有哪些,税费多少
  • linux CentOS/redhat 6.5 LVM分区使用详解
  • 工程项目发包是什么意思
  • 出口退税新政策对出口贸易的影响
  • 几种方法解决一个问题的架构图怎么画
  • 弥补亏损企业类型都是一般企业吗
  • 会计科目在建工程包括哪些
  • ryzen3 2200g相当于i几
  • 未分配收益怎么取出
  • 为什么磁盘会消失
  • php实现验证码功能
  • 五金企业成本核算方法
  • PHP基于SimpleXML生成和解析xml的方法示例
  • 应收账款需要计提损失准备吗
  • 免征增值税会计科目
  • python编程100例
  • 论文导读怎么做
  • javascript基础书
  • 前端es2020
  • 货款收不回来了怎么做账
  • 没有发票以及收款怎么办
  • 董事会会费应计什么科目
  • java中的常量是什么意思
  • 公司向银行贷款还不上会怎么样
  • 旅游公司差额征税如何开票
  • 劳务维修费怎么开票
  • 金蝶利润表出现科目
  • 开发票该怎么操作?
  • 企业增值税的计算
  • 客户多付的货款 不用退回 进营业外收入吗
  • 已出库的成品退货怎么办
  • 商场进行打折促销活动,消费金额(p)
  • 内资非独立核算的企业
  • 公司销售一批物品怎么做
  • 公司注销开户许可证是不是要上交
  • 建筑业农民工工资个税合理避税
  • 购买税控盘用银行抵扣吗
  • 对公账户是不是哪个银行都可以
  • 专票网上抵扣流程
  • 物流公司的会计怎么样
  • 简易征收可以抵税吗
  • mysql中的查询
  • bios怎么更改硬盘格式
  • 如何看xp系统
  • ControlSet001、ControlSet002以及CurrentControlSet之间有什么区别
  • linux中怎么在文件中添加内容
  • node.js连接mysql的数据怎么可视化
  • 绝对给力的超经典
  • 完本小说 电子书地址
  • 值得收藏的十大收录机
  • python yield from 用法
  • 企业改制和重组的区别
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设