位置: 编程技术 - 正文

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

编辑:rootadmin

在一个(差)的PostgreSQL 查询中只要一个小小到改动(ANY(ARRAY[...])to ANY(VALUES(...)))就能把查询时间从s缩减到0.2s。从最简单的学习使用 EXPLAIN ANALYZE开始,到学习使用 Postgres community 大量学习时间的投入将有百倍时间到回报。

使用Postgres监测慢的Postgres查询

在这周早些时候,一个用于我们的图形编辑器上的小表(GB,万行)的主键查询,在我们的一个(多个)数据库上发生来大的查询性能问题。

.9%到查询都是非常迅速流畅的,但是在一些使用大量的枚举值的地方,这些查询会需要秒。花费如此多到时间在数据库上,意味着使用者必须在浏览器面前等待图形编辑器的响应。很明显只因为这0.%就会造成很不好到影响。 查询和查询计划

下面是这个出问题的查询

表X有几千行数据,表C有万条数据。两张表的主键值“key”都有适当的索引。这是一个非常简单清晰的主键查询。但有趣的是,当增加主键内容的数量,如在主键有,个值的时候,通过在查询语句上加上 EXPLAIN (ANALYZE, BUFFERS)我们得到如下的查询计划。

在结果的最底部你可以看到,这个查询总共花费秒。我们可以非常直观的通过下面的CPU使用率图观察到这秒的花费。大部分的时间花费在 Postgres和 OS 上, 只有很少部分用于I/O . 在最低的层面,这些查询看起来就像是这些CPU利用率的峰值。CPU图很少有用,但是在这种条件下它证实了关键的一点:数据库并没有等待磁盘去读取数据。它在做一些排序,哈希以及行比较之类的事情。 第二个有趣的度量,就是距离这些峰值很近的轨迹,它们是由Postgres“取得”的行数(本例中没有返回,就看看再忽略掉吧)。 显然有些动作在规则的有条不紊的浏览过许多行:我们的查询。 Postgres 的问题所在:位图扫描 下面是行匹配的查询计划 Postgres 使用位图扫描表C. 当主键的数据量小的时候,它能有效的使用索引在内存里建立位图。如果位图太大,最优查询计划就改变查询方式了。在我们这个查询中,因为主键包含的数据量很大,所以查询就使用最优(系统自己判断的)的方式去检索查询候选行,并且立即查询所有和主键匹配的数据。就是这些¨放入内存¨和¨立即查询¨花费太多的时间(查询计划中的Recheck Cond)。 幸好只有%的数据被导入到内存中,所以还不至于像从硬盘里读取那么坏。但它仍然对性能有非常明显的影响。记住,查询是非常简单的。这是一个主键查询所以没有很多明了的方式来确定它有没有戏剧性的重新架构数据库或应用程序。PGSQL-Performance mailing list给予了我们很大的帮助. 解决方案

这是我们喜欢开源和喜欢帮助用户的另外一个原因。Tom Lane是开源代码作者中最盛产的程序员之一,他建议我们做如下尝试:

把ARRAY改成VALUES,你能指出他们的不同点吗?

我们使用ARRAY[...]列举出所有的关键字以用来查询,但是这却欺骗了查询优化器。然而Values(...)却能够让优化器充分使用关键字索引。仅仅是一行代码的改变,并且没有产生任何语义的改变。

下面是新查询语句的写法,差别就在于第三和第十四行。

查询时间从ms下降到ms,仅仅一行代码的改变效率就提高了倍。

在生产中使用的新查询 即将发布的一段代码:

它使数据库看起来更美观轻松.

第三方工具 postgres慢查询不存在了。但是有谁乐意被0.1%不幸的少数折磨。要立即验证修改查询的影响,就需要Datadog来帮助我们判断修改是否是正确的。

如果你想要找出对Postgres查询改变的影响,可能需要几分钟来注册一个免费的Datadog账号。 英文原文:x faster Postgres performance by changing 1 line

推荐整理分享修改一行代码提升 Postgres 性能 100 倍(一行的代码),希望有所帮助,仅作参考,欢迎阅读内容。

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

文章相关热门搜索词:怎样修改代码,一行代码5个bug,怎样修改代码,怎样修改代码,代码更改,代码怎么改,运行时修改代码,代码更改,内容如对您有帮助,希望把文章链接给更多的朋友!

Windows下PostgreSQL安装图解 现在谈起免费数据库,大多数人首先想到的可能是MySQL,的确MySQL目前已经应用在国内很多领域,尤其是网站架设方面。但是,实际上功能最强大、特性

Postgre数据库Insert 、Query性能优化详解 一、前言以前的系统由于表设计比较复杂(多张表,表与表直接有主从关系),这个是业务逻辑决定的。插入效率简直实在无法忍受,必须优化。在了

PostgreSQL管理工具phpPgAdmin入门指南 一、安装phpPgAdmin将下载的压缩包解压对于tar.gz执行如下命令:gunzipphpPgAdmin-*.tar.gztar-xvfphpPgAdmin-*.tar对于tar.bz2执行如下命令:bunzip2phpPgAdmin-*.tar.bz2tar-xvfph

标签: 一行的代码

本文链接地址:https://www.jiuchutong.com/biancheng/319655.html 转载请保留说明!

上一篇:PostgreSQL 查看数据库,索引,表,表空间大小的示例代码

下一篇:Windows下PostgreSQL安装图解

  • 个人去税务局开劳务费怎么交税
  • 个人独资企业需要监事吗
  • 小规模纳税人利润如何缴税
  • 退回以前年度教育附加费
  • 软件即征即退的发票怎么开
  • 城建税计税依据扣除增值税期末留抵
  • 收到订金如何开票
  • 一般纳税人的税务筹划
  • 展板制作费属于什么服务
  • 房地产企业预收款预缴增值税
  • 农产品收购发票可以跨区域开吗
  • 补入库存商品的会计分录
  • 分摊材料成本差异率怎么算
  • 如何开具红字增值发票
  • 装修行业属于什么行业分类
  • 支付工程款不得超60天
  • 红字专用发票信息表编号在哪儿
  • 坏账准备的转回对资产的影响
  • 小规模核定销售额是什么意思
  • 苹果设置输入法在哪里设置
  • 教你怎么制作微信表情
  • 个体户流水过大怎么避税
  • 微软 Windows10
  • 期货交易所返还期货公司利息
  • linux网络接口状态命令
  • php制作数字验证码
  • 鹤望兰的养殖方法和注意事项浇水
  • php异常处理和错误处理
  • vue默认首页
  • 最快的XQD存储卡是什么
  • php实现页面浏览量
  • 财务会计制度或纳税人财务会计核算办法
  • phalcon model在插入或更新时会自动验证非空字段的解决办法
  • php数组函数有哪些
  • 三维重建的主要步骤
  • vue中proxy代理?
  • cd播放模式
  • print函数php
  • PHP Ajax JavaScript Json获取天气信息实现代码
  • mongodb用法
  • 企业的会计科目可以任意设置随意修改
  • 固定资产盘盈为什么计入以前年度损益调整
  • 更正个税申报需要交滞纳金没
  • 异地如何申报纳税
  • 进项的加计抵减怎么算
  • sql server 2008使用
  • 安装sql server 2008提示重新启动计算机
  • 个人所得税如何缴纳
  • 汇算清缴时发现收入少了
  • 固定制造费用差异的意义
  • 固定资产的更新改造支出计入什么科目
  • 增值税期末有留抵税额应该怎么结转
  • 合并报表抵消分录的基本原理
  • 以前期间留抵税额是什么意思
  • 折旧完的固定资产出售
  • 全面推开营改增政策指引
  • 法院的申请执行费是多少
  • 委托加工产品送货合同
  • 销户还能申请抚养费吗?
  • 交易性金融资产属于流动资产
  • 年初未分配利润在利润表怎么填
  • 隔空传送怎样使用苹果
  • window10 uwp
  • ubuntu升级到21.04
  • linux设置gid
  • macos 备份
  • centos7怎么配置ip地址和网络
  • owmngr.exe - owmngr是什么进程 作用是什么
  • 微软win8.1
  • w7升级w8.1
  • 微信小程序实现人脸识别
  • 浅谈jquery的应用
  • linux中使用bash是什么意思
  • javascript var
  • jquery中validate
  • jquery 模态窗口
  • multiset volatile
  • 国税局公告2019年43号
  • 上海税务举报电话多少
  • 扬帆把舵怎么读
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设