位置: 编程技术 - 正文

提高MySQL中InnoDB表BLOB列的存储效率的教程(mysql in如何优化)

编辑:rootadmin

推荐整理分享提高MySQL中InnoDB表BLOB列的存储效率的教程(mysql in如何优化),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:mysql如何调优,mysql innodb 优化,mysql innodb 优化,mysql innodb 优化,mysql提高效率,提高mysql性能,提高mysql性能,mysql提高效率,内容如对您有帮助,希望把文章链接给更多的朋友!

首先,介绍下关于InnoDB引擎存储格式的几个要点:1、InnoDB可以选择使用共享表空间或者是独立表空间方式,建议使用独立表空间,便于管理、维护。启用 innodb_file_per_table 选项,5.5以后可以在线动态修改生效,并且执行 ALTER TABLE xx ENGINE = InnoDB 将现有表转成独立表空间,早于5.5的版本,修改完这个选项后,需要重启才能生效;2、InnoDB的data page默认KB,5.6版本以后,新增选项 innodb_page_size 可以修改,在5.6以前的版本,只能修改源码重新编译,但并不推荐修改这个配置,除非你非常清楚它有什么优缺点;3、InnoDB的data page在有新数据写入时,会预留1/的空间,预留出来的空间可用于后续的新纪录写入,减少频繁的新增data page的开销;4、每个data page,至少需要存储2行记录。因此理论上行记录最大长度为8KB,但事实上应该更小,因为还有一些InnoDB内部数据结构要存储;5、受限于InnoDB存储方式,如果数据是顺序写入的话,最理想的情况下,data page的填充率是/,但一般没办法保证完全的顺序写入,因此,data page的填充率一般是1/2到/。因此每个InnoDB表都最好要有一个自增列作为主键,使得新纪录写入尽可能是顺序的;6、当data page填充率不足1/2时,InnoDB会进行收缩,释放空闲空间;7、MySQL 5.6版本的InnoDB引擎当前支持COMPACT、REDUNDANT、DYNAMIC、COMPRESSED四种格式,默认是COMPACT格式,COMPRESSED用的很少且不推荐(见下一条),如果需要用到压缩特性的话,可以直接考虑TokuDB引擎;8、COMPACT行格式相比REDUNDANT,大概能节省%的存储空间,COMPRESSED相比COMPACT大概能节省%的存储空间,但会导致TPS下降了%。因此强烈不推荐使用COMPRESSED行格式;9、当行格式为DYNAMIC或COMPRESSED时,TEXT/BLOB之类的长列(long column,也有可能是其他较长的列,不一定只有TEXT/BLOB类型,看具体情况)会完全存储在一个独立的data page里,聚集索引页中只使用字节的指针指向新的page,这就是所谓的off-page,类似ORACLE的行迁移,磁盘空间浪费较严重,且I/O性能也较差。因此,强烈不建议使用BLOB、TEXT、超过长度的VARCHAR列类型;、当InnoDB的文件格式(innodb_file_format)设置为Antelope,并且行格式为COMPACT 或 REDUNDANT 时,BLOB、TEXT或者长VARCHAR列只会将其前字节存储在聚集索页中(最大字节的作用是便于创建前缀索引/prefix index),其余更多的内容存储在额外的page里,哪怕只是多了一个字节。因此,所有列长度越短越好;、在off-page中存储的BLOB、TEXT或者长VARCHAR列的page是独享的,不能共享。因此强烈不建议在一个表中使用多个长列。

综上,如果在实际业务中,确实需要在InnoDB表中存储BLOB、TEXT、长VARCHAR列时,有下面几点建议:1、尽可能将所有数据序列化、压缩之后,存储在同一个列里,避免发生多次off-page;2、实际最大存储长度低于的列,转成VARCHAR或者CHAR类型(如果是变长数据二者没区别,如果是定长数据,则使用CHAR类型);3、如果无法将所有列整合到一个列,可以退而求其次,根据每个列最大长度进行排列组合后拆分成多个子表,尽量是的每个子表的总行长度小于8KB,减少发生off-page的频率;4、上述建议是在data page为默认的KB前提下,如果修改成8KB或者其他大小,请自行根据上述理论进行测试,找到最合适的值;5、字符型列长度小于时,无论采用CHAR还是VARCHAR来存储,或者把VARCHAR列长度定义为,都不会导致实际表空间增大;6、一般在游戏领域会用到比较多的BLOB列类型,游戏界同行可以关注下。

提高MySQL中InnoDB表BLOB列的存储效率的教程(mysql in如何优化)

下面是测试验证过程,有耐心的同学可以慢慢看:

上述各个测试表都写入行记录后,再来对比下其表空间文件大小,以及重整表空间后的大小,观察碎片率。详细对比见下:

最后一种分表方式中,5个子表的表空间文件大小总和是 + + + + = 字节。可以看到,这种方式的总大小和原始表大小差距最小,其他几种存储方式都比这个来的大。

使用sysbench来测试MySQL性能的详细教程 sysbench是一个模块化的、跨平台、多线程基准测试工具,主要用于评估测试各种不同系统参数下的数据库负载情况。目前sysbench代码托管在launchpad上,项

探究MySQL中索引和提交频率对InnoDB表写入速度的影响 本次,我们来看看索引、提交频率对InnoDB表写入速度的影响,了解有哪些需要注意的。先直接说几个结论吧:1、关于索引对写入速度的影响:a、如果有

关于MySQL中savepoint语句使用时所出现的错误 前几天帮同事解决一个案例,在主从复制环境下,从库上的MySQL版本号是5.5.5,遇到下面的错误:#其他非相关信息我都隐藏掉了[(yejr@imysql.com)]showslavestatu

标签: mysql in如何优化

本文链接地址:https://www.jiuchutong.com/biancheng/347334.html 转载请保留说明!

上一篇:简单分析MySQL中的primary key功能(mysql的基本介绍)

下一篇:使用sysbench来测试MySQL性能的详细教程(sysbench内存性能测试)

  • 税务罚款如何做会计分录
  • 养猪场死猪处理方法
  • 申报后发现未勾选发票
  • 收到上年多缴的企业所得税
  • 固定资产清理属于什么科目
  • 合同印花税用不用计提
  • 建筑工程外地预交税款后完工怎么办
  • 企业促销应该采用什么方法
  • 建筑劳务公司的工资计入什么科目
  • 冲销已结转的成本
  • 印花税按什么税率
  • 房地产企业收到定金 什么时候交增值税 账务处理
  • 所有者权益减少资产减少案例
  • 邮局劳务费发票几个点
  • 纳税义务发生时间和纳税期限的关系
  • 合同返点提成犯法吗
  • 无形资产的入账价值包括什么
  • 任务管理器网络占用率100%怎么办
  • 社会保险生育险能报多少
  • 纳税人办理退税手续流程
  • 个体工商税务登记需要费用
  • linux中不能使用的shell
  • 大白菜一键装机教程
  • 小规模纳税人差额征税
  • 收到税务汇算清缴怎么办
  • 销售方红字发票账务处理
  • lsm.exe是什么程序
  • 计提摊销的分录
  • chrome谷歌浏览器
  • python编程自动化框架怎么搭建
  • 如何让header居中
  • 外购货物用于在建工程分录
  • python3 sys模块
  • python 函数的返回值
  • sql server数据库正在恢复
  • python转换数字
  • 纳税人遗失税务登记证件并按照规定
  • 年金终值系数是指已知( ),求终值
  • 联营扣点怎么做账
  • 国家税务总局纳税服务规范
  • 改良生产线发生的职工薪酬计入期间费用
  • 加计扣除减免政策
  • 研发费用辅助账怎么做
  • 租单位的房子怎么办营业执照
  • 转让不动产增值税征收管理办法
  • 应付账款尾款怎么处理
  • 支付给职工以及为职工支付的现金增加说明什么
  • 建筑业的人工费是什么
  • 增值税销项税额属于什么科目
  • 已确认收入但尚未发出商品分录
  • 通行费电子发票进项税额如何填报
  • 实际上缴税费总额怎么算
  • 个税多缴了纳税人怎么办
  • 职工外地就医怎么报销
  • 根据《物业管理条例》的规定,物业服务企业
  • 银行汇票可用于异地结算吗
  • 商标无形资产摊销计入什么科目
  • 发票未缴销是什么意思
  • 卖出去的货没有发票怎么给人家解释
  • 营业外支出包括哪些内容
  • sql server分页查询sql语句
  • centos bz
  • freebsd怎么样
  • win8截屏在哪个文件夹
  • rapimgr.exe - rapimgr进程是什么文件.有哪些作用
  • msdev.exe是什么
  • 怎么下载win8
  • win10重置系统快捷键
  • 动态设置class
  • 欢迎使用来电提醒业务是什么意思
  • python语言如何获取随机整数
  • shell脚本-ge
  • 如何提取api
  • nodejss
  • javascript基于什么的语言
  • java项目的命名规则
  • Unable to connect to zookeeper
  • 个体户增值税申报比对不符怎么处理
  • 武汉税务局官网查询系统
  • 实名办税人员承诺书范本
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设