阿里云HybridDB for PostgreSQL内存与负载管理(resource queue)实践-低调大师

阿里云HybridDB for PostgreSQL内存与负载管理(resource queue)实践

2017-08-25 512

背景

Greenplum是一个重计算和重资源的MPP数据库，可谓有多少资源就能消耗多少资源，带来的好处是处理速度变快了，坏处就是容易用超。

CPU、网络、硬盘用超的话，关系不大，因为大不了就是到硬件瓶颈，但是内存用超的话会带来较大的负面影响，例如操作系统OOM用户进程，导致数据库崩溃等。

如果要达到非常强壮的稳定性，Greenplum内存的配置非常的关键。（当然代码本身的质量也很关键）

如何避免OOM

OOM指遇到了进程申请内存不足的错误。例如

Out of memory (seg27 host.example.com pid=47093)  
VM P

微信关注我们

原文链接：https://yq.aliyun.com/articles/179199

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

奥委会主席巴赫与马云对谈：阿里巴巴能将奥运精神带进科技时代

“这就像是一个婚礼，而这里是有天堂之称的杭州。国际奥委会与阿里巴巴的联姻，可以把奥林匹克精神带进科技时代。”8月25日下午，国际奥委会主席巴赫造访杭州阿里巴巴总部，与马云一起为联合logo石雕揭幕，双方也展开了一番关于“云上奥运”的轻松对谈。杭州天气仍然很热，但参与揭幕仪式的巴赫兴致盎然：“阿里巴巴和国际奥委会都致力于让人们更加快乐和健康。国际奥委会通过体育实现这一愿景，而阿里巴巴则是通过科技。我们达成合作，并肩努力，无疑将会推动梦想成为现实。” 奥运会与阿里巴巴的“双H（健康和快乐）”战略天然契合，这也是阿里巴巴投身奥运大家庭的原因之一。“当我读到国际奥委会的发展愿景时，异常兴奋，这就是我们要支持的精神。”马云说，“阿里将运用科技减少奥运会的运营成本，奥运会也会因此就会得到进一步发展。运用数据技术，我们也会促进奥运会的创新，让更多

2017-08-25

599

标签 PostgreSQL , Greenplum , query倾斜 , 存储倾斜 , OOM , disk full , 短板 , 数据分布背景对于分布式数据库来说，QUERY的运行效率取决于最慢的那个节点。当数据出现倾斜时，某些节点的运算量可能比其他节点大。除了带来运行慢的问题，还有其他的问题，例如导致OOM，或者DISK FULL等问题。如何监控倾斜 1、监控数据库级别倾斜 postgres=# select gp_execution_dbid(), datname, pg_size_pretty(pg_database_size(datname)) from gp_dist_random('pg_database') order by 2,1,pg_database_size(datname) desc; gp_execu

2017-08-26

728

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。