位置: 编程技术 - 正文

Mysql数据库性能优化三(分表、增量备份、还原)(mysql数据库性能监控)

编辑:rootadmin

推荐整理分享Mysql数据库性能优化三(分表、增量备份、还原)(mysql数据库性能监控),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:mysql数据库性能监控工具,MySQL数据库性能诊断产品DBdoctor介绍,MySQL数据库性能监控及调优,mysql数据库性能优化方法,mysql数据库性能指标,MySQL数据库性能诊断产品DBdoctor介绍,MySQL数据库性能优化,mysql数据库性能调优,内容如对您有帮助,希望把文章链接给更多的朋友!

接上篇Mysql数据库性能优化二

对表进行水平划分

如果一个表的记录数太多了,比如上千万条,而且需要经常检索,那么我们就有必要化整为零了。如果我拆成个表,那么每个表只有万条记录。当然这需要数据在逻辑上可以划分。一个好的划分依据,有利于程序的简单实现,也可以充分利用水平分表的优势。比如系统界面上只提供按月查询的功能,那么把表按月拆分成个,每个查询只查询一个表就够了。如果非要按照地域来分,即使把表拆的再小,查询还是要联合所有表来查,还不如不拆了。所以一个好的拆分依据是 最重要的。关键字:UNION

例:

订单表根据订单产生时间来分表(一年一张) 学生情况表 查询电话费,近三个月的数据放入一张表,一年内的放入到另一张表

对表进行垂直划分

有些表记录数并不多,可能也就2、3万条,但是字段却很长,表占用空间很大,检索表时需要执行大量I/O,严重降低了性能。这个时候需要把大的字段拆分到另一个表,并且该表与原表是一对一的关系。 (JOIN)

【试题内容】、【答案信息】两个表,最初是作为几个字段添加到【试题信息】里的,可以看到试题内容和答案这两个字段很长,在表里有3万记录时,表已经占 了1G的空间,在列试题列表时非常慢。经过分析,发现系统很多时候是根据【册】、【单元】、类型、类别、难易程度等查询条件,分页显示试题详细内容。而每 次检索都是这几个表做join,每次要扫描一遍1G的表。我们完全可以把内容和答案拆分成另一个表,只有显示详细内容的时候才读这个大表,由此 就产生了【试题内容】、【答案信息】两个表。

选择适当的字段类型,特别是主键

选择字段的一般原则是保小不保大,能用占用字节小的字段就不用大字段。比如主键, 建议使用自增类型,这样省空间,空间就是效率!按4个字节和按个字节定位一条记录,谁快谁慢太明显了。涉及到几个表做join时,效果就更明显了。

建议使用一个不含业务逻辑的id做主角如s。例:

文件、图片等大文件用文件系统存储

数据库只存储路径。图片和文件存放在文件系统,甚至单独放在一台服务器(图床 / 视频服务器 ).

数据库参数配置

最重要的参数就是内存,我们主要用的innodb引擎,所以下面两个参数调的很大

对于myisam,需要调整key_buffer_size,当然调整参数还是要看状态,用show status语句可以看到当前状态,以决定改调整哪些参数

在my.ini修改端口,默认存储引擎和最大连接数

合理的硬件资源和操作系统

如果你的机器内存超过4G,那么毋庸置疑应当采用位操作系统和位mysql 5.5. or mysql5.6

读写分离

如果数据库压力很大,一台机器支撑不了,那么可以用mysql复制实现多台机器同步,将数据库的压力分散。

Master  Slave1  Slave2  Slave3

主库master用来写入,slave1—slave3都用来做select,每个数据库分担的压力小了很多。要实现这种方式,需要程序特别设计,写都操作master,读都操作slave,给程序开发带来了额外负担。当然目前已经有中间件来实现这个代理,对程 序来读写哪些数据库是透明的。官方有个mysql-proxy,但是还是alpha版本的。新浪有个amobe for mysql,也可达到这个目的,结构如下

定时完成数据库的备份

项目实际需求,请完成定时备份某个数据库,或者定时备份数据库的某些表的操作

windows 下每隔1小时,备份一次数据newsdb

windows 每天晚上2: 备份 newsdb 下 某一张表

cmd> mysqldump ?u root ?p密码 数据库名 > 把数据库放入到某个目录

案例,备份 mydb 库的所有表

进入mysqldump所在的目录

cmd> mysqldump ?u root ?phsp shop> d:/shop.log [把shop数据库的所有表全部导出]

cmd> mysqldump ?u root ?phsp shop temusers emp > d:/shop2.log [shop数据库的 temusers和emp导出]

Mysql数据库性能优化三(分表、增量备份、还原)(mysql数据库性能监控)

如何恢复数据的表

进入的mysql操作界面

mysql>source 备份文件的全路径

定时备份:(把命令写入到my.bat 问中)

windows 如何定时备份 (每天凌晨2:)

使用windows自带的计划任务,定时执行批处理命令。

增量备份和还原

定义:mysql数据库会以二进制的形式,自动把用户对mysql数据库的操作,记录到文件,当用户希望恢复的时候,可以使用备份文件进行恢复。

增量备份会记录dml语句、创建表的语句,不会记录select。记录的东西包括:sql语句本身、操作时间,位置

进行增量备份的步骤和恢复

注意:mysql5.0及之前的版本是不支持增量备份的

1、配置my.ini文件或者my.conf,启用二进制备份。

打开my.ini文件,查找log-bin,进行配置:log-bin=G:Databasemysqlbinlogmylog

在G:Database目录下面新建目录mysqlbinlog

2、重启mysql服务

这个时候会在mysqlbinlog目录下面看到以下两个文件:

mylog.:日志备份文件。如果要查看这个日志文件里面的信息,我们可以使用mysqlbinlog程序查看,mysqlbinlog程序存放在mysql的bin目录下面(“C:Program FilesMySQLMySQL Server 5.6bin”)。

执行sql语句

UPDATE emp set ename='zouqj' where empno=;

开始——运行——cmd,mysqlbinlog 备份文件路径

C:Program FilesMySQLMySQL Server 5.6bin>mysqlbinlog G:Databasemysqlbinlogmylog.

mylog.index:日志索引文件,里面记录了所以的日志文件。(G:Databasemysqlbinlogmylog.)

3、假设现在问题来了,我这条update是误操作,如何进行恢复

在mysql日志中会记录每一次操作的时间和位置,所以我们既可以根据时间来恢复,也可以根据位置来恢复。

那么,我们现在马上可以从上图看出,这条语句产生的时间是"-- ::",位置是

按时间来恢复

我们可以选择在语句产生时间的前一秒

执行cmd命令:mysqlbinlog --stop-datetime="-- ::" G:Databasemysqlbinlogmylog. | mysql -uroot -p

这个时候我再执行SQL语句查看

SELECT * from emp where empno=;

结果变成了

按位置来恢复

执行cmd命令:mysqlbinlog --stop-position="" G:Databasemysqlbinlogmylog. | mysql -uroot -p

这个时候再执行SQL来查看结果,又变回来了。

标签: mysql数据库性能监控

本文链接地址:https://www.jiuchutong.com/biancheng/320235.html 转载请保留说明!

上一篇:Sql Server中Substring函数的用法实例解析

下一篇:SQLServer获取临时表所有列名或是否存在指定列名的方法(sql查询使用临时表)

  • 出口退税退的税是用进项税抵扣吗
  • 金税盘不用了之后要抄报税吗
  • 物业费的税金是否向业主收取
  • 资产管理公司的使命
  • 行政单位调拨的固定资产申请报告
  • 资产负债表中的流动资产包括什么
  • 报销招待费事由有哪些
  • 工程总包如何开具发票和征税
  • 已报废的固定资产
  • 公司销售家电并购案例
  • 房产企业土地增值税税率
  • 外地扣缴的个人所得税
  • 盘盈入库做什么分录
  • 不同税率的增值税如何报税
  • 货款为现金如何做记账账款凭证?
  • 增值税农产品扣除率
  • 计提工资需要工资表吗
  • 有效期起止时间段与已有备案有效期有交集
  • 计提法定盈余公积转入利润分配
  • 个体户可以不领税控盘吗
  • 公司注销时资本公积为股东出资款要缴税吗?
  • 实收资本是否可以更改
  • 做账计入收入没有结转成本怎么做账?
  • 允许扣除的土地价款怎么计算例题
  • 贴息收据税前扣除是什么
  • 医疗废物处置费是什么意思
  • .exe文件怎么打不开
  • 会计折算是什么意思
  • 存货损失进项税
  • 结转本月主营业务收入800000元,营业外收入2500元
  • 开始菜单无法打开怎么办
  • linux grep显示行数
  • 独资子公司如何注册
  • PHP:oci_field_size()的用法_Oracle函数
  • 前端登录退出怎么操作
  • 不动产出租管理办法
  • 购货人与收货人的关系
  • 税务机关为小规模纳税人
  • 税务局要求小规模纳税人开专票
  • 金银首饰消费税计税依据
  • 出差补助需要发工资吗
  • openpose的输出
  • web自动化测试项目
  • 分页 php
  • sql server 2008数据库
  • mysql内存使用详解
  • 差旅费报销金额大于实际发生金额
  • 实收资本可以用于偿还借款
  • 有净残值的固定资产累计折旧怎么算
  • 销售包括是销项税金吗
  • 破产清算不够支付员工补偿金
  • 企业自产自用的产品需要缴纳增值税吗
  • 公司申请破产后债务谁来还
  • 公用经费属于哪一类经费
  • 跨年租金如何确认收入
  • 筹建期间的开办费属于资产吗
  • 专用发票和普通发票 报销
  • 个税申报工资比实发工资高
  • 个体工商户的个税起征点
  • 建筑租赁公司账务处理
  • 高速公路通行费抵扣税率
  • 红字的记账凭证怎么记账
  • 还账准备计提方法
  • 一般纳税人企业所得税多久申报一次
  • 大额往来款项的认定
  • 仓库费用计入什么科目
  • 总公司与分公司的关系
  • sql server怎么使用sql语句
  • mysql批量更新多条数据
  • windows server 2003如何安装
  • linux常用基本命令pwd
  • ubuntu无线网卡驱动离线安装
  • mac怎么共享打印机设备
  • win10 系统优化
  • opengl怎么学
  • div+css与xhtml+css分别是什么意思?
  • js获取tbody
  • 用Fragment+ViewPager搭建万能的android界面
  • jquery判断数据类型
  • 建筑工程开票要在项目所在地
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设