PostgreSQL的CURSOR SHARING-低调大师

PostgreSQL的CURSOR SHARING

2021-07-05 685

文章转载自公众号：白鳝的洞穴

作者：白鳝

Oracle DBA最怕遇到CURSOR 相关的问题，如果发生了CURSOR争用导致的性能问题，是很难在短时间内分析清楚的。有时候我们重启数据库就解决了这个问题，不过有时候重启数据库后问题依然存在。幸运的是在PostgreSQL数据库中好像很少会遇到类似的问题，这是什么原因呢？

在一个高并发的系统中，SQL执行过程需要对SQL进行编译，这个过程无论哪种数据库都是必须有的。大体上分为语法语义解析、SQL REWRITE优化、执行计划生成、执行计划选择、执行等过程。在PostgreSQL中，可以用下面这个图来表示。

为了避免每次SQL执行之前都做上述昂贵的操作，Oracle构建了全局共享的CURSOR结构，用于在共享内存（SHARED POOL）中存储CURSOR共享部分的数据，用于所有的会话共享。似乎现在的Mysql、PostgreSQL等开源数据库和一些国产数据库都没有再采用这种全局共享CURSOR的机制，而大多数采用SQL不共享或者会话内共享CURSOR的机制，比如比较新版本的PostgreSQL就是采用会话内共享SQL的机制。

为什么Oracle使用全局CURSOR共享机制而PostgreSQL不使用呢？这实际上有两方面的原因，一个是历史原因，一个是商业原因。CURSOR共享在CPU资源不是很充裕的时代是相当有效提升RDBMS执行效率的手段，因为SQL解析是十分高开销的工作，能够一次编译多次执行，可以大大提高系统的并发执行性能。因此作为商用数据库的Oracle一直把提升CURSOR共享能力作为其核心竞争力，ORACLE的CURSOR全局共享就做成了一个独步天下的技术了。Postgresql这样的开源数据库没有Oracle的大手笔，因此选择了较为稳妥的会话内共享SQL的技术路线。幸亏是现在X86服务器技术的高速发展，CPU资源已经不是很难买到的了，因此不能在全局共享CURSOR的问题也已经不是一个特别严重的问题了。实际上，这些年我们遇到的因为CUSOR硬解析导致的ORACLE数据库性能问题也少了很多，主要原因是哪怕CURSOR解析使用了10+%的CPU资源，对我们的服务器来说也还是撑得住的。

虽然说PG并没有采用全局共享CURSOR的策略，不过在会话内共享多次执行的CURSOR仍然对PG数据库并发执行性能的提升有极大帮助的。说起共享CURSOR就不可避免地会聊到绑定变量的使用问题。使用绑定变量的好处是让SQL可以共享，可以让一条类似的SQL在多次执行中共享查询执行计划，这样就不需要每次都编译SQL语句；不过使用绑定变了也有缺点，在Oracle存在的著名的bind peeking问题在任何数据库中都会存在，因为绑定变量的差异可能选择不同执行计划才好的问题在很多时候都是存在的。在Oracle 9iR2之前，所有执行计划都是在变量绑定之前完成的，从9.2开始,Oracle将执行计划的生成放到了变量绑定之后，这样就让执行计划的生成更为精准了，不过这也带来了另外一个问题，那就是SQL第一次执行时的变量成为生成执行计划的依据，因此CURSOR共享会导致存在多种最优执行计划的SQL语句的运行性能变得不稳定。Oracle 11g之后的自适应CURSOR共享才基本上解决了这个问题。

PostgreSQL数据库的CURSOR共享机制学习了Oracle的这一个新的特性，采用了一种类似的方法来解决这个即共享CURSOR又尽可能避免多种最优执行计划导致的SQL性能问题，当然前提是，PostgreSQL的CURSOR共享是会话级的，不是实例级的。

在PostgreSQL的一个会话中，一条SQL的前五次执行，每次都会重新生成执行计划，这样就可以避免因为绑定变量的差异导致存在多种最优执行计划的问题无法被发现的问题出现。如果前五次编译发现存在通用执行计划，那么这个通用执行计划就会被共享。我们来看下面的例子。

我们可以看到，在前面五次执行的时候object_id都是代入具体得值的，而第六次执行就变成$1，这就是使用了通用执行计划。我们再来看一个复杂一些的例子。

从这个例子上可以看到，如果绑定变量出现了较大的差异，那么PostgreSQL不会一味的用通用执行计划去套用，而是会使用custom执行计划，通过全表扫描来替代索引扫描，从而确保SQL的高效执行，这和Oracle的Adaptive Cursor sharing的思路基本上是一致的。

规模空前，再创历史 | 2020 PG亚洲大会圆满结束

PG ACE计划的正式发布

三期PostgreSQL国际线上沙龙活动的举办

六期PostgreSQL国内线上沙龙活动的举办

中国PostgreSQL分会与腾讯云战略合作协议签订

PostgreSQL 13.0 正式版发布通告

深度报告：开源协议那些事儿

从“非主流”到“潮流”，开源早已值得拥有

Oracle中国正在进行新一轮裁员，传 N+6 补偿

PostgreSQL与MySQL版权比较

新闻|Babelfish使PostgreSQL直接兼容SQL Server应用程序

四年三冠，PostgreSQL再度荣获“年度数据库”

更多新闻资讯，行业动态，技术热点，请关注中国PostgreSQL分会官方网站

https://www.postgresqlchina.com

中国PostgreSQL分会生态产品

https://www.pgfans.cn

中国PostgreSQL分会资源下载站

https://www.postgreshub.cn

点击此处阅读原文

↓↓↓

本文分享自微信公众号 - 开源软件联盟PostgreSQL分会（kaiyuanlianmeng）。
如有侵权，请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一起分享。

微信关注我们

原文链接：https://my.oschina.net/postgresqlchina/blog/5121454

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

安全事件周报：SolarWinds 黑客在丹麦央行藏匿数月；LinkedIn 遭遇数据泄露

报告编号：B6-2021-070501 报告来源：360CERT 报告作者：360CERT 更新日期：2021-07-05 事件导览本周收录安全热点12项，话题集中在网络攻击、数据安全方面，涉及的组织有：微软、爱尔兰卫生局、LinkedIn、WordPress等。多个卫生机构遭遇数据泄露。对此，360CERT建议使用360安全卫士进行病毒检测、使用360安全分析响应平台进行威胁流量检测，使用360城市级网络安全监测服务QUAKE进行资产测绘，做好资产自查以及预防工作，以免遭受黑客攻击。恶意程序 Wolfe眼科诊所遭勒索软件攻击暴露了50万患者的数据全球警方关闭黑客常用的VPN服务攻击者通过鱼叉式网络钓鱼活动瞄准航空公司数据安全 LinkedIn 遭遇数据泄露至少120万俄罗斯用户的登录名和密码在网上被泄露 VirusTotal被勒令披露HSE数据下载者的私人信息网络攻击微软再次遭遇依赖劫持攻击爱尔兰卫生遭勒索软件攻击损失的费用超过6亿美元太阳风攻击对公司造成的损失平均为1200万美元 SolarWinds黑客在丹麦央行藏匿数月其它事件 CVE-2021-1675 ...

2021-07-06

791

Spark-Store 3.0.3 已经发布，Wine 应用商店此版本更新内容包括： DTK 界面的最后一个版本支持应用详情页显示升级/重新安装修复应用详情页经常加载失败的问题支持动态获取下载镜像源列表尝试开启 Hidpi 支持 DTK 界面版本后续随缘维护更新详情查看：https://gitee.com/deepin-community-store/spark-store/releases/3.0.3

2021-07-06

733

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。