万字长文详解降本增效利器 PikiwiDB(Pika) 混合存储原理
1 混合存储 2023 年 11 月 PikiwiDB 社区发布了 PikiwiDB(Pika) v3.5.2【下文简称 Pika】版本。 在本版本更新中，我们引入了一个关键特性：通过在 Pika 的命令处理层集成 Redis 缓存，对冷数据与热数据进行了分离，在性能和成本之间达成了平衡，实现了混合存储。本文旨在深入探讨这一特性的架构设计与核心思想，期待与各位同行共同探讨。 在大型键值（kv）存储系统中，用户访问的数据通常呈现明显的冷热分布特性。所谓热数据，即那些被频繁访问的数据；而冷数据则相反，它们被访问的频率极低。为了提高数据访问的效率，降低读取耗时，关键在于如何让热数据更多地驻留在内存层，减少不必要的磁盘I/O操作。 为了实现这一目标，我们借鉴了 Redis 的缓存机制，并将其集成到 Pika 的命令处理层中。当用户请求到达时，Pika 首先检查 Redis 缓存中是否存在所需数据。如果数据存在于缓存中（即热数据），则直接返回给用户，无需再访问磁盘层；如果数据不存在于缓存中（即冷数据），则再去 RocksDB 检索数据，并将其加入缓存层以供后续访问。通过这种方式，我们不仅能够显...
