首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://www.oschina.net/p/ihp

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

每日一博 | ClickHouse 冷热分离存储在得物的实践

1. 业务背景 得物上一代日志平台的存储主要依赖于 ES。随着公司业务的高速发展,日志场景逐步产生了一些新需求,主要表现在:应用数量逐步增多,研发需要打印更多的日志定位业务问题,安全合规需要保留更长时间的日志。随着 Clickhouse 的应用广泛,我们了解到行业部分知名公司已经将日志平台逐步由 ES 迁移至Clickhouse,以此来获取更好的写入性能与高压缩比。因此我们与日志平台研发团队开始进行日志平台新存储的选型评估,本文会介绍我们如何通过 Clickhouse 的冷热分离存储替代 ES 的实施方案。 2. 前置介绍 2.1 ClickHouse 简介 ClickHouse 是一个用于联机分析( OLAP )的列式数据库管理系统( DBMS )。列式数据库更适合于 OLAP场景(对于大多数查询而言,处理速度至少提高了 100 倍),下面通过图片更有利于直观理解: 行式 图片来源: https://ClickHouse.com/docs/assets/images/row-oriented-d515facb5bffb48cbd09dc7d064c8816.gif# 列式 图片来源:...

Pigsty:开箱即用的开源数据库发行版

Pigsty 是一款好用、安全、省钱的开源数据库发 行版,开箱即用。它以 PostgreSQL 为核心,打包 TimescaleDB 、 PostGIS 、 Citus 及上百余个扩展插 件。整合了生产环境所需的 PaaS 基础设施与数据分 析组件:将顶级 DBA 的经验沉淀为软件,一次性解 决使用数据库时遇到的各类问题。 推荐官: 冯若航, Pigsty 项目作者,全栈开发 者、 PostgreSQL 中文社区技术委员会常委,曾任职 于 Apple 、 TanTan 、 Alibaba ,同时也是《 DDIA 》、 《 PGInternal 》译者。 推荐理由: Pigsty 是自动驾驶的运维解决方案,带有全面专 业的监控系统,与简单易用的高可用数据库部署管控 方案。用户只需声明自己想要什么样的数据库,即可 将其一键创建: PostgreSQL / Redis / Greenplum 。 作为一款简单易用的开发者工具箱,无论是下 载、安装、还是部署迁移备份恢复扩缩容, Pigsty 都 能一键完成。基于 Vagrant 的本地沙箱与 Terraform 的多云部署能力,让 Pig...

相关文章

发表评论

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Oracle

Oracle

Oracle Database,又名Oracle RDBMS,或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好、使用方便、功能强,适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat

Apache Tomcat

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。