位置: 编程技术 - 正文

MySQL主从同步原理介绍

编辑:rootadmin

推荐整理分享MySQL主从同步原理介绍,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

概述

Mysql的Replication(复制)是一个异步的复制过程,从一个 Mysql instance(我们称之为 Master)复制到另一个Mysql instance(我们称之 Slave)。在 Master 与 Slave之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在Master端。

主从同步需求

要实现 MySQL 的 Replication ,首先必须打开 Master 端的BinaryLog(mysql-bin.xxxxxx)功能,否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin” 参数选项,或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin” 参数项。

主从同步过程

MySQL 复制的基本过程如下:

MySQL主从同步原理介绍

1.Slave上面的IO线程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2.Master接收到来自Slave的IO线程的请求后,通过负责复制的IO线程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave端的 IO线程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master端的Binary Log文件的名称以及在Binary Log中的位置;3.Slave的IO线程接收到信息后,将接收到的日志内容依次写入到 Slave 端的RelayLog文件(mysql-relay-bin.xxxxxx)的最末端,并将读取到的Master端的bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”。4.Slave的SQL线程检测到Relay Log中新增加了内容后,会马上解析该Log文件中的内容成为在Master 端真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master端和Slave端执行了同样的Query,所以两端的数据是完全一样的。

实际上,在老版本中,MySQL 的复制实现在 Slave 端并不是由 SQL 线程和 IO线程这两个线程共同协作而完成的,而是由单独的一个线程来完成所有的工作。但是 MySQL的工程师们很快发现,这样做存在很大的风险和性能问题,主要如下:

1.首先,如果通过一个单一的线程来独立实现这个工作的话,就使复制 Master 端的,BinaryLog日志,以及解析这些日志,然后再在自身执行的这个过程成为一个串行的过程,性能自然会受到较大的限制,这种架构下的Replication 的延迟自然就比较长了。

3.其次,Slave 端的这个复制线程从 Master 端获取 Binary Log 过来之后,需要接着解析这些内容,还原成Master 端所执行的原始 Query,然后在自身执行。在这个过程中,Master端很可能又已经产生了大量的变化并生成了大量的Binary Log 信息。如果在这个阶段 Master端的存储系统出现了无法修复的故障,那么在这个阶段所产生的所有变更都将永远的丢失,无法再找回来。这种潜在风险在Slave端压力比较大的时候尤其突出,因为如果 Slave压力比较大,解析日志以及应用这些日志所花费的时间自然就会更长一些,可能丢失的数据也就会更多。

所以,在后期的改造中,新版本的 MySQL 为了尽量减小这个风险,并提高复制的性能,将 Slave端的复制改为两个线程来完成,也就是前面所提到的 SQL 线程和 IO线程。最早提出这个改进方案的是Yahoo!的一位工程师“JeremyZawodny”。通过这样的改造,这样既在很大程度上解决了性能问题,缩短了异步的延时时间,同时也减少了潜在的数据丢失量。

当然,即使是换成了现在这样两个线程来协作处理之后,同样也还是存在 Slave数据延时以及数据丢失的可能性的,毕竟这个复制是异步的。只要数据的更改不是在一个事务中,这些问题都是存在的。

总结

初步了解了MySQL主从复制的原理。

MySQL开启记录执行过的SQL语句方法 概述很多时候,我们需要知道MySQL执行过哪些SQL语句,比如MySQL被注入后,需要知道造成什么伤害等等。只要有SQL语句的记录,就能知道情况并作出对策

MySQL分页技术、6种分页方法总结 概述有朋友问:MySQL的分页似乎一直是个问题,有什么优化方法吗?网上看到赶集网XX推荐了一些分页方法,但似乎不太可行,你能点评一下吗?方法总结

在CentOS上安装phpMyAdmin的教程 前提在CentOS上安装phpMyAdmin,你第一步需要架设一台Web服务器(如Apache或nginx),安装好MySQL/MariaDB数据库和PHP。根据你的偏好和需求,你可以从LAMP和LEMP中选

标签: MySQL主从同步原理介绍

本文链接地址:https://www.jiuchutong.com/biancheng/347660.html 转载请保留说明!

上一篇:MySQL日志文件详解(mysql日志记录)

下一篇:MySQL开启记录执行过的SQL语句方法(查看mysql执行sql日志内容)

  • 报税显示缺少组件怎么办
  • 企业可以找审计人员吗
  • 个体工商户属于非法人组织吗
  • 其他综合收益转入投资收益
  • 怎么看自己公司是一般纳税人还是小规模纳税人
  • 季度企业所得税可以不预缴吗
  • 现金折让怎么做会计分录
  • 被投资方减资的会计处理
  • 会员卡收费怎么办理
  • 应交增值税减免税额
  • 应收账款资产减值损失转回和核销的区别
  • 开办费一次性摊销企业所得税
  • 出售办公用房要交什么税
  • 如果公司没有报税
  • 哪些房产免纳房产税
  • 用友t3财务报表模块打不开
  • 待认证发票后面需要做附件吗
  • 公司贷款评估费的做账
  • 无形资产怎么计算摊销
  • 怎么知道定额发票是真是假的
  • 1697508871
  • 预收购货款的会计分录
  • 期间费用率计算方式
  • 如何在windows11上打开蓝牙
  • 欠款利息收入如何入账
  • 一次性开票分期确认收入如何纳税申报
  • 公司委托第三方缴纳社保合法吗
  • php 反射
  • isass是什么程序
  • PHP:pg_select()的用法_PostgreSQL函数
  • 出售报废的边角料收入会计分录
  • 问题解决能力
  • php和javaweb
  • 阿里云天池大赛pdf
  • 微信公众号php开发教程
  • rgb to hex
  • php怎么上传图片并保存到数据库
  • c++交换语句
  • c语言中数组越界
  • 驱动开发做得长久吗
  • 股东投资款超过多少,必须股东会
  • 结转损益的凭证需要打印吗
  • rabbitmq work queue
  • 中间业务收入怎么入账
  • 资产负债表的种类
  • 建筑安装的扩展性是指
  • 社保缴费基数怎么算
  • 企业财务费用为负好不好
  • 购进生产免税货物用材料可以抵扣进项税额吗
  • 财产清查怎么做分录
  • 未开票收入转为开票收入
  • 差旅费抵扣政策内容
  • 金税卡就是税控盘吗
  • 要约收购的条件和程序具体包括哪些?
  • 高新技术企业退出机制
  • 投资性房地产公允价值小于账面价值
  • 设置行政机构的主要依据是
  • 数据库表的查询操作实验
  • Windows(x86,64bit)升级MySQL 5.7.17免安装版的详细教程
  • windows8自动更新在哪里关闭
  • Win10预览版镜像
  • window 80端口被占用
  • win7如何设置休眠不断网
  • office进程
  • win10mobile更新出错
  • win8怎么连接宽带账号密码
  • c#在unity的作用
  • unity自动寻路
  • node.js+captchapng+jsonwebtoken实现登录验证示例
  • 修复硬盘
  • Android EventBus实战
  • jQuery 获取跨域XML(RSS)数据的相关总结分析
  • 河南省发票查询真伪查询系统
  • 唐山宴订餐电话是多少
  • 印花税没有做税种认定怎么办
  • 广西电子税务局怎么报税
  • 税务局发涵有几种
  • 缴纳社保问题证明怎么查
  • 煤炭资源税税率选煤税率多少黑龙江
  • 百旺税控人工客服电话
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设