阿里云HybridDB for PostgreSQL内存与负载管理(resource queue)实践-低调大师

阿里云HybridDB for PostgreSQL内存与负载管理(resource queue)实践

2017-08-25 501

背景

Greenplum是一个重计算和重资源的MPP数据库，可谓有多少资源就能消耗多少资源，带来的好处是处理速度变快了，坏处就是容易用超。

CPU、网络、硬盘用超的话，关系不大，因为大不了就是到硬件瓶颈，但是内存用超的话会带来较大的负面影响，例如操作系统OOM用户进程，导致数据库崩溃等。

如果要达到非常强壮的稳定性，Greenplum内存的配置非常的关键。（当然代码本身的质量也很关键）

如何避免OOM

OOM指遇到了进程申请内存不足的错误。例如

Out of memory (seg27 host.example.com pid=47093)  
VM P

微信关注我们

原文链接：https://yq.aliyun.com/articles/179199

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

奥委会主席巴赫与马云对谈：阿里巴巴能将奥运精神带进科技时代

“这就像是一个婚礼，而这里是有天堂之称的杭州。国际奥委会与阿里巴巴的联姻，可以把奥林匹克精神带进科技时代。”8月25日下午，国际奥委会主席巴赫造访杭州阿里巴巴总部，与马云一起为联合logo石雕揭幕，双方也展开了一番关于“云上奥运”的轻松对谈。杭州天气仍然很热，但参与揭幕仪式的巴赫兴致盎然：“阿里巴巴和国际奥委会都致力于让人们更加快乐和健康。国际奥委会通过体育实现这一愿景，而阿里巴巴则是通过科技。我们达成合作，并肩努力，无疑将会推动梦想成为现实。” 奥运会与阿里巴巴的“双H（健康和快乐）”战略天然契合，这也是阿里巴巴投身奥运大家庭的原因之一。“当我读到国际奥委会的发展愿景时，异常兴奋，这就是我们要支持的精神。”马云说，“阿里将运用科技减少奥运会的运营成本，奥运会也会因此就会得到进一步发展。运用数据技术，我们也会促进奥运会的创新，让更多

2017-08-25

587

分布式DB数据倾斜的原因和解法 - 阿里云HybridDB for PostgreSQL最佳实践

标签 PostgreSQL , Greenplum , query倾斜 , 存储倾斜 , OOM , disk full , 短板 , 数据分布背景对于分布式数据库来说，QUERY的运行效率取决于最慢的那个节点。当数据出现倾斜时，某些节点的运算量可能比其他节点大。除了带来运行慢的问题，还有其他的问题，例如导致OOM，或者DISK FULL等问题。如何监控倾斜 1、监控数据库级别倾斜 postgres=# select gp_execution_dbid(), datname, pg_size_pretty(pg_database_size(datname)) from gp_dist_random('pg_database') order by 2,1,pg_database_size(datname) desc; gp_execu

2017-08-26

716

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。