位置: 编程技术 - 正文

MySQL主从同步原理介绍

编辑:rootadmin

推荐整理分享MySQL主从同步原理介绍,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

概述

Mysql的Replication(复制)是一个异步的复制过程,从一个 Mysql instance(我们称之为 Master)复制到另一个Mysql instance(我们称之 Slave)。在 Master 与 Slave之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在Master端。

主从同步需求

要实现 MySQL 的 Replication ,首先必须打开 Master 端的BinaryLog(mysql-bin.xxxxxx)功能,否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin” 参数选项,或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin” 参数项。

主从同步过程

MySQL 复制的基本过程如下:

MySQL主从同步原理介绍

1.Slave上面的IO线程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2.Master接收到来自Slave的IO线程的请求后,通过负责复制的IO线程根据请求信息读取指定日志指定位置之后的日志信息,返回给Slave端的 IO线程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息在Master端的Binary Log文件的名称以及在Binary Log中的位置;3.Slave的IO线程接收到信息后,将接收到的日志内容依次写入到 Slave 端的RelayLog文件(mysql-relay-bin.xxxxxx)的最末端,并将读取到的Master端的bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”。4.Slave的SQL线程检测到Relay Log中新增加了内容后,会马上解析该Log文件中的内容成为在Master 端真实执行时候的那些可执行的Query语句,并在自身执行这些Query。这样,实际上就是在Master端和Slave端执行了同样的Query,所以两端的数据是完全一样的。

实际上,在老版本中,MySQL 的复制实现在 Slave 端并不是由 SQL 线程和 IO线程这两个线程共同协作而完成的,而是由单独的一个线程来完成所有的工作。但是 MySQL的工程师们很快发现,这样做存在很大的风险和性能问题,主要如下:

1.首先,如果通过一个单一的线程来独立实现这个工作的话,就使复制 Master 端的,BinaryLog日志,以及解析这些日志,然后再在自身执行的这个过程成为一个串行的过程,性能自然会受到较大的限制,这种架构下的Replication 的延迟自然就比较长了。

3.其次,Slave 端的这个复制线程从 Master 端获取 Binary Log 过来之后,需要接着解析这些内容,还原成Master 端所执行的原始 Query,然后在自身执行。在这个过程中,Master端很可能又已经产生了大量的变化并生成了大量的Binary Log 信息。如果在这个阶段 Master端的存储系统出现了无法修复的故障,那么在这个阶段所产生的所有变更都将永远的丢失,无法再找回来。这种潜在风险在Slave端压力比较大的时候尤其突出,因为如果 Slave压力比较大,解析日志以及应用这些日志所花费的时间自然就会更长一些,可能丢失的数据也就会更多。

所以,在后期的改造中,新版本的 MySQL 为了尽量减小这个风险,并提高复制的性能,将 Slave端的复制改为两个线程来完成,也就是前面所提到的 SQL 线程和 IO线程。最早提出这个改进方案的是Yahoo!的一位工程师“JeremyZawodny”。通过这样的改造,这样既在很大程度上解决了性能问题,缩短了异步的延时时间,同时也减少了潜在的数据丢失量。

当然,即使是换成了现在这样两个线程来协作处理之后,同样也还是存在 Slave数据延时以及数据丢失的可能性的,毕竟这个复制是异步的。只要数据的更改不是在一个事务中,这些问题都是存在的。

总结

初步了解了MySQL主从复制的原理。

MySQL开启记录执行过的SQL语句方法 概述很多时候,我们需要知道MySQL执行过哪些SQL语句,比如MySQL被注入后,需要知道造成什么伤害等等。只要有SQL语句的记录,就能知道情况并作出对策

MySQL分页技术、6种分页方法总结 概述有朋友问:MySQL的分页似乎一直是个问题,有什么优化方法吗?网上看到赶集网XX推荐了一些分页方法,但似乎不太可行,你能点评一下吗?方法总结

在CentOS上安装phpMyAdmin的教程 前提在CentOS上安装phpMyAdmin,你第一步需要架设一台Web服务器(如Apache或nginx),安装好MySQL/MariaDB数据库和PHP。根据你的偏好和需求,你可以从LAMP和LEMP中选

标签: MySQL主从同步原理介绍

本文链接地址:https://www.jiuchutong.com/biancheng/347660.html 转载请保留说明!

上一篇:MySQL日志文件详解(mysql日志记录)

下一篇:MySQL开启记录执行过的SQL语句方法(查看mysql执行sql日志内容)

  • 从香港向境外汇款怎么汇
  • 什么是增值税留底退税
  • 年底企业所得税计提少了
  • 社保个人承担部分
  • 报销流程如何操作视频
  • 客户发票弄丢了应该如何补救
  • 税控盘当月不抵扣怎么申报
  • 企业所得税不超过300万怎么算
  • 个体户生产经营个人所得税
  • 发票查询校验码看不清怎么办
  • 金税盘维护费全额抵扣冲减的管理费用怎样结转
  • 核定征收的小规模企业所得税B表收入总额含税吗
  • 挖掘机要交多少个人所得税
  • 企业退回企业所得税分录
  • 个人减税具体政策
  • 偿债基金公司债
  • 二手机械设备买卖合同
  • 出租厂房的摊销额会计分录
  • 应交税费明细科目设置
  • 不是办税员可以去税局办事吗
  • 特许权使用费怎么入账
  • 技术开发加计扣除
  • 小公司发工资怎么做账
  • 企业取得免税收入怎么算
  • 个体户免税额度超出了
  • 劳务服务公司可以承包大型工程吗?
  • .exe文件病毒
  • 默认网关不可用修复后过一会又不好使了
  • saproxy.exe - saproxy是什么进程 有什么用
  • 工会经费的计税依据包括劳务费吗
  • PHP:xml_set_start_namespace_decl_handler()的用法_XML解析器函数
  • 电脑找不到u盘怎么解决
  • 呆账核销的条件有哪些
  • 承兑汇票无法兑现的原因
  • 赊销商品属于什么信用
  • 用tomcat部署web项目
  • 销售货物收到普票会计分录
  • php使用pclzip类实现文件压缩的方法(附pclzip类下载地址)
  • 现金及现金等价物净增加额为负数
  • php图文教程
  • 发票必须在什么时候开
  • 长期借款主要包括哪些
  • 固定资产清理的金额怎么算
  • 金蝶暂存凭证怎样转正常凭证
  • 电子承兑汇票是银行承兑汇票吗
  • 收汇结汇以什么汇率入账
  • 当月的印花税需要交吗
  • 加权平均净资产收益率公式
  • 利息返还是什么意思
  • 工程结算材料款抵扣增值税
  • 支付代理费计入什么科目
  • 累计折旧用什么账页格式
  • 修改企业账套的步骤
  • windows2008r2无线网卡不可用
  • win10预览版21301bug
  • winXP设备管理器在哪
  • win8系统 Cisco VPN 442错误怎么办?解决方法介绍
  • win10怎么把中文系统改成英文
  • windowsxp的设置在哪
  • xp注册表文件在哪
  • mac火狐浏览器flash插件设置
  • Centos 6.4 安装dnsmasq的方法
  • linux apt apt-get
  • 电脑arp攻击怎么解决
  • perl常用函数
  • nodejs实战教程
  • javascript函数怎么写
  • nodejs入门教程
  • vue复用node_module
  • android深度探索(卷1):hal与驱动开发
  • jquery过滤选择器案例
  • javascript indexOf方法、lastIndexOf 方法和substring 方法
  • 自定义圆角控件
  • 电子税务里面怎么作废发票
  • 盐城市地税局稽查大队长
  • 湖北税务投诉电话
  • 农产品进项税额核定扣除
  • 电子税务局财务报表利润表本期金额
  • 税务数据清理变态
  • 税控盘离线开票时间超限是怎么回事
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设