位置: 编程技术 - 正文

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

编辑:rootadmin

在一个(差)的PostgreSQL 查询中只要一个小小到改动(ANY(ARRAY[...])to ANY(VALUES(...)))就能把查询时间从s缩减到0.2s。从最简单的学习使用 EXPLAIN ANALYZE开始,到学习使用 Postgres community 大量学习时间的投入将有百倍时间到回报。

使用Postgres监测慢的Postgres查询

在这周早些时候,一个用于我们的图形编辑器上的小表(GB,万行)的主键查询,在我们的一个(多个)数据库上发生来大的查询性能问题。

.9%到查询都是非常迅速流畅的,但是在一些使用大量的枚举值的地方,这些查询会需要秒。花费如此多到时间在数据库上,意味着使用者必须在浏览器面前等待图形编辑器的响应。很明显只因为这0.%就会造成很不好到影响。 查询和查询计划

下面是这个出问题的查询

表X有几千行数据,表C有万条数据。两张表的主键值“key”都有适当的索引。这是一个非常简单清晰的主键查询。但有趣的是,当增加主键内容的数量,如在主键有,个值的时候,通过在查询语句上加上 EXPLAIN (ANALYZE, BUFFERS)我们得到如下的查询计划。

在结果的最底部你可以看到,这个查询总共花费秒。我们可以非常直观的通过下面的CPU使用率图观察到这秒的花费。大部分的时间花费在 Postgres和 OS 上, 只有很少部分用于I/O . 在最低的层面,这些查询看起来就像是这些CPU利用率的峰值。CPU图很少有用,但是在这种条件下它证实了关键的一点:数据库并没有等待磁盘去读取数据。它在做一些排序,哈希以及行比较之类的事情。 第二个有趣的度量,就是距离这些峰值很近的轨迹,它们是由Postgres“取得”的行数(本例中没有返回,就看看再忽略掉吧)。 显然有些动作在规则的有条不紊的浏览过许多行:我们的查询。 Postgres 的问题所在:位图扫描 下面是行匹配的查询计划 Postgres 使用位图扫描表C. 当主键的数据量小的时候,它能有效的使用索引在内存里建立位图。如果位图太大,最优查询计划就改变查询方式了。在我们这个查询中,因为主键包含的数据量很大,所以查询就使用最优(系统自己判断的)的方式去检索查询候选行,并且立即查询所有和主键匹配的数据。就是这些¨放入内存¨和¨立即查询¨花费太多的时间(查询计划中的Recheck Cond)。 幸好只有%的数据被导入到内存中,所以还不至于像从硬盘里读取那么坏。但它仍然对性能有非常明显的影响。记住,查询是非常简单的。这是一个主键查询所以没有很多明了的方式来确定它有没有戏剧性的重新架构数据库或应用程序。PGSQL-Performance mailing list给予了我们很大的帮助. 解决方案

这是我们喜欢开源和喜欢帮助用户的另外一个原因。Tom Lane是开源代码作者中最盛产的程序员之一,他建议我们做如下尝试:

把ARRAY改成VALUES,你能指出他们的不同点吗?

我们使用ARRAY[...]列举出所有的关键字以用来查询,但是这却欺骗了查询优化器。然而Values(...)却能够让优化器充分使用关键字索引。仅仅是一行代码的改变,并且没有产生任何语义的改变。

下面是新查询语句的写法,差别就在于第三和第十四行。

查询时间从ms下降到ms,仅仅一行代码的改变效率就提高了倍。

在生产中使用的新查询 即将发布的一段代码:

它使数据库看起来更美观轻松.

第三方工具 postgres慢查询不存在了。但是有谁乐意被0.1%不幸的少数折磨。要立即验证修改查询的影响,就需要Datadog来帮助我们判断修改是否是正确的。

如果你想要找出对Postgres查询改变的影响,可能需要几分钟来注册一个免费的Datadog账号。 英文原文:x faster Postgres performance by changing 1 line

推荐整理分享修改一行代码提升 Postgres 性能 100 倍(一行的代码),希望有所帮助,仅作参考,欢迎阅读内容。

修改一行代码提升 Postgres 性能 100 倍(一行的代码)

文章相关热门搜索词:怎样修改代码,一行代码5个bug,怎样修改代码,怎样修改代码,代码更改,代码怎么改,运行时修改代码,代码更改,内容如对您有帮助,希望把文章链接给更多的朋友!

Windows下PostgreSQL安装图解 现在谈起免费数据库,大多数人首先想到的可能是MySQL,的确MySQL目前已经应用在国内很多领域,尤其是网站架设方面。但是,实际上功能最强大、特性

Postgre数据库Insert 、Query性能优化详解 一、前言以前的系统由于表设计比较复杂(多张表,表与表直接有主从关系),这个是业务逻辑决定的。插入效率简直实在无法忍受,必须优化。在了

PostgreSQL管理工具phpPgAdmin入门指南 一、安装phpPgAdmin将下载的压缩包解压对于tar.gz执行如下命令:gunzipphpPgAdmin-*.tar.gztar-xvfphpPgAdmin-*.tar对于tar.bz2执行如下命令:bunzip2phpPgAdmin-*.tar.bz2tar-xvfph

标签: 一行的代码

本文链接地址:https://www.jiuchutong.com/biancheng/319655.html 转载请保留说明!

上一篇:PostgreSQL 查看数据库,索引,表,表空间大小的示例代码

下一篇:Windows下PostgreSQL安装图解

  • 消费税是什么意思大白话
  • 个税累计免征额
  • 残保基金的计算公式
  • 哪些税种计税价格是含增值税
  • 独资合伙企业的所有者用于承担企业财务风险的财产是
  • 银行抵债资产处置需要缴纳什么税费
  • 以汽车出资
  • 房地产企业所得税预缴
  • 收外汇需要提供什么
  • 代扣代缴个人所得税计入哪个科目
  • 建筑工程公司项目经理职责
  • 制造型企业采购
  • 增值税普通发票怎么开
  • 水利建设专项收入怎么计算
  • 混业经营试点
  • 学生兼职需要交什么税
  • 开了红字发票税额已经缴纳怎么做账?
  • 商品返点收入账务处理
  • 外经证金额没开完需要核销吗
  • 即征即退进项税额分摊方法
  • 已抵扣原材料进项税额转出完整分录
  • 奖金发放如何做账
  • 往公户存钱怎么存最划算
  • 旅游费用账务处理
  • 个人所得税如何退税操作步骤
  • 索尼vaio笔记本看型号
  • ms-dos 6.0
  • 贷款损失会计处理
  • 半成品月末账务处理
  • 资产与负债的计税基础
  • 计划成本法和实际成本法区别
  • 超过两年的发票还可以查询吗
  • dxva2.dll是什么意思
  • pavprsrv.exe - pavprsrv是什么进程 有什么用
  • 混合成本的分解方法很多,通常有
  • 建筑保温材料施工工艺
  • 现金盘盈后的财务分析
  • 建筑设备出租并配备人员
  • 没进项可以开专票吗
  • phpinclude
  • python一点都不简单
  • 视同销售的增值税怎么申报
  • 审计报告分别在什么阶段
  • 更改sql server数据库名
  • 单位购买预付卡可以用现金吗
  • 保证金存款账户需要销户吗
  • 同时安装vs2005团队开发版和sql 2005企业版的方法(downmoon原作)
  • 长期股权投资与其他权益工具投资的区别
  • 钉钉财务软件怎么用
  • 开红字发票需要做收回原发票吗?
  • 收购溢价会计处理
  • 建筑图纸设计费怎么收费
  • 客户以个人名义打对公户现在要求开专票可以吗
  • 收到发票就是付款了吗
  • 分公司费用报销
  • 安装vista
  • win10怎么用xp经典主题
  • win7自带播放器怎么打开
  • win7开机taskeng
  • linux svn操作
  • putty ssh tunnel
  • ubuntu系统升级到18
  • win10系统更新后
  • Win10 Redstone 11082视频快速上手:已知bug及新变化一览
  • cocos2dx4.0入门
  • vs2013怎么配置环境
  • js必学知识点
  • jquery easyui开发指南
  • perl -i -pe
  • ssh远程登录脚本
  • Python下的慢
  • 我写的书日语
  • unity动画教程
  • unity example project
  • 境外抵免限额如何申请
  • 网上报税失败怎么办
  • 中山大学税务硕士
  • 税收负担与税负转嫁
  • 铁力杯四省冠军
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设