位置: 编程技术 - 正文

mysql分表分库的应用场景和设计方式(mysql分库分表实践)

编辑:rootadmin

推荐整理分享mysql分表分库的应用场景和设计方式(mysql分库分表实践),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:mysql 分库分表实现,mysql 分表分库,mysql分表分库方案,mysql分表分库方案,mysql数据库分库分表方案,mysql分表分库方案,mysql数据库分库分表方案,mysql分表分库方案,内容如对您有帮助,希望把文章链接给更多的朋友!

很多朋友在论坛和留言区域问mysql在什么情况下才需要进行分库分表,以及采用何种设计方式才是最优的选择,根据这些问题,小编为大家整理了关于MySQL分库分表的应用场景和最优的设计方式举例。

一. 分表

场景:对于大型的互联网应用来说,数据库单表的记录行数可能达到千万级甚至是亿级,并且数据库面临着极高的并发访问。采用Master-Slave复制模式的MySQL架构,

只能够对数据库的读进行扩展,而对数据库的写入操作还是集中在Master上,并且单个Master挂载的Slave也不可能无限制多,Slave的数量受到Master能力和负载的限制。

因此,需要对数据库的吞吐能力进行进一步的扩展,以满足高并发访问与海量数据存储的需要!

对于访问极为频繁且数据量巨大的单表来说,我们首先要做的就是减少单表的记录条数,以便减少数据查询所需要的时间,提高数据库的吞吐,这就是所谓的分表!

在分表之前,首先需要选择适当的分表策略,使得数据能够较为均衡地分不到多张表中,并且不影响正常的查询!

对于互联网企业来说,大部分数据都是与用户关联的,因此,用户id是最常用的分表字段。因为大部分查询都需要带上用户id,这样既不影响查询,又能够使数据较为均衡地

分布到各个表中(当然,有的场景也可能会出现冷热数据分布不均衡的情况),如下图:

假设有一张表记录用户购买信息的订单表order,由于order表记录条数太多,将被拆分成张表。

拆分的记录根据user_id%取得对应的表进行存储,前台应用则根据对应的user_id%,找到对应订单存储的表进行访问。

这样一来,user_id便成为一个必需的查询条件,否则将会由于无法定位数据存储的表而无法对数据进行访问。

注:拆分后表的数量一般为2的n次方,就是上面拆分成张表的由来!

假设order表结构如下:

那么分表以后,假设user_id = ,并且auction_id = ,需要根据auction_id来查询对应的订单信息,则对应的SQL语句如下:

其中,order_1是根据%计算得出,表示分表之后的第一张order表。

二. 分库

场景:分表能够解决单表数据量过大带来的查询效率下降的问题,但是,却无法给数据库的并发处理能力带来质的提升。面对高并发的读写访问,当数据库master

mysql分表分库的应用场景和设计方式(mysql分库分表实践)

服务器无法承载写操作压力时,不管如何扩展slave服务器,此时都没有意义了。

因此,我们必须换一种思路,对数据库进行拆分,从而提高数据库写入能力,这就是所谓的分库!

与分表策略相似,分库可以采用通过一个关键字取模的方式,来对数据访问进行路由,如下图所示:

还是之前的订单表,假设user_id 字段的值为,将原有的单库分为个库,那么应用程序对数据库的访问请求将被路由到第二个库(% = 2)。

三. 分库分表

场景:有时数据库可能既面临着高并发访问的压力,又需要面对海量数据的存储问题,这时需要对数据库既采用分表策略,又采用分库策略,以便同时扩展系统的

并发处理能力,以及提升单表的查询性能,这就是所谓的分库分表。

分库分表的策略比前面的仅分库或者仅分表的策略要更为复杂,一种分库分表的路由策略如下:

1. 中间变量 = user_id % (分库数量 * 每个库的表数量)

2. 库 = 取整数 (中间变量 / 每个库的表数量)

3. 表 = 中间变量 % 每个库的表数量

同样采用user_id作为路由字段,首先使用user_id 对库数量*每个库表的数量取模,得到一个中间变量;然后使用中间变量除以每个库表的数量,取整,便得到

对应的库;而中间变量对每个库表的数量取模,即得到对应的表。

分库分表策略详细过程如下:

假设将原来的单库单表order拆分成个库,每个库包含个表,那么按照前面所提到的路由策略,对于user_id= 的访问,路由的计算过程如下:

1. 中间变量 = % ( * ) = 1

2. 库 = 取整 (1/) = 0

3. 表 = 1 % = 1

这就意味着,对于user_id= 的订单记录的查询和修改,将被路由到第0个库的第1个order_1表中执行!!!

Linux下MySQL数据库的主从同步复制配置 Linux下MySQL数据库的主从同步配置的好处是可以把这个方式当做是一个备份的方法,用来实现读写分离,缓解一个数据库的压力。让运行海量数据的时候

Mysql数据库存储过程基本语法讲解 dropproceduresp_name//在此之前,小编给大家讲述过MYSQL语法的基本知识,本篇内容,小编通过下面的一个实例,给读者们通过实战中的代码讲解一下基本语

在Mac系统上配置MySQL以及Squel Pro 为了响应nodejs的大红大紫,最近应用其实现了一些server端的功能。数据库方面选择了老少咸宜的MySQL。今后肯定还会有相关应用需求。特此记录Mac系统下

标签: mysql分库分表实践

本文链接地址:https://www.jiuchutong.com/biancheng/312269.html 转载请保留说明!

上一篇:mysql数据库分表分库的策略(mysql分表的3种方法)

下一篇:Linux下MySQL数据库的主从同步复制配置

  • 增值税发票勾选确认后可以撤销吗
  • 哪些税不用通过应交税费
  • 采购暂估的处理方式
  • 如何在网上查询个人房产
  • 委托外单位研发的研发费用加计扣除最新政策
  • 短期借款明细账应采用三栏式账页格式
  • 转让股权收入需要缴纳企业所得税吗
  • 销售单用途商业预付卡是否可能涉嫌诈骗
  • 平销返利企业所得税处理
  • 企业购房税费政策
  • 承兑汇票的贴现费用怎么计算
  • 所得税汇算清缴调整项目
  • 供热企业采暖费收入免征增值税政策解读
  • 银行回单手续费怎么找到对应金额
  • 当月不抵扣的增值税发票怎么做账
  • 一般纳税人所得税优惠政策
  • 资产负债表中资产总计和负债所有者权益不平等
  • 车辆保险车船税怎么计算
  • 因改制重组等原因撤回出口退税备案需要提交哪些资料?
  • 预提材料运费怎么计算
  • 投资者减除费用30000
  • Win10 64位正式版系统安装方法全过程图解(U大师)
  • php数组函数有哪些
  • 子公司增发股票母公司为什么会产生利得
  • 电脑右下角的小三角怎么弄出来
  • 销售收入与销售成本
  • 其他应收个人贷方余额表示什么意思
  • 基金会债券收入吗
  • 增值税怎样计算
  • 印度泰姬陵建筑
  • 爬坑图片卡通
  • 劳务外包会计分录最新
  • ts和js混用
  • 2023华为OD机试题
  • 你应该知道的数学常识纪录片
  • thinkphp withjoin
  • 内部结算属于什么科目类别
  • 借款利息收入开票
  • 合作社计提工资
  • 农民工专用账户回执单
  • 采购商品的运费计入成本吗
  • 劳务公司可以
  • 分公司非独立核算企业所得税处理
  • 旅游费记入什么科目
  • 员工工资需要交税吗
  • 自行建造的固定资产达到预定可使用状态
  • mysql配置怎么调出来
  • 允许在企业所得税税前扣除的
  • 材料成本差异是什么
  • 参加新冠疫情防控工作总结
  • 差旅费出差补助标准
  • 固定资产在以后会计期间可以转回吗
  • 计提工资的会计账务处理
  • 产品成本计算的分批法适用于
  • 现金支付的范围包括
  • 服务咨询类合同
  • 中国的法律依据是什么
  • 公司账户收入金额有规定吗
  • mysql动态sql语句赋值
  • win8安全中心在哪
  • windows vista在哪里
  • windows 专业版10安装后文件会丢失嘛
  • win7系统怎么用
  • win edge
  • windows自动启动设置
  • 845主板支持1t硬盘吗
  • win8.1怎么优化才流畅
  • 什么是边角料
  • win8.1无线
  • jquery源码是什么水平
  • 为了防止编码过程的过载现象出现
  • python检索文件中的内容
  • 在线视频爬取工具
  • JavaScript中的NaN代表什么
  • 沈阳税务局兑奖中心在哪
  • 经营租赁属于什么费用
  • 接受虚开转出滞纳金
  • 利润表研发费用项目应根据管理费用
  • 加油的增值税发票可以抵扣吗
  • 上海疫情租房金额怎么算
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设