探秘 Cassandra 数据文件合并优化

2019-10-22 756

前言

Cassandra是一款NoSQL分布式数据库，采用LSM Tree架构。众所周知，LSM有两个重要过程：数据顺序刷入磁盘生成数据文件（SSTable）和数据文件合并（Compaction）。今天本文主要说一个Compaction过程中的优化。

数据文件合并（Compaction）

首先我们要明白Compaction这个过程到底要做什么事，再来看如何优化。我们先从数据文件（SSTable）说起。

SSTable: Sorted String Table

这个词源自Google BigTable论文，是一个不可修改的数据文件。最初数据来自于用户写入，并且缓存在内存中。当缓存满的时候，会将缓存中的数据刷入磁盘，也就生成了SSTable文件。刷入磁盘的SSTable里的数据是排好序的。比如，用户写入[1, 0, 2, 4] 这么4条数据，

微信关注我们

原文链接：https://yq.aliyun.com/articles/722143

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

CV预备(三): Ubuntu18.04下OpenCV3.X环境搭建

CV预备(一): conv2, filter2, imfilter的差别CV预备(二): im2col与col2im 目录前言安装测试最后前言为什么在OpenCV4.X出了n多个版本的时候, 我要来搭建3.X, 无他, 就是我目前的一些工程要调用的库需要3.X, 不然的话, macOS下直接brew install opencv就完事了, 我还写啥? 而且另一方面就是homebrew对老版本的安装真的不是很友好. 安装首先如果是我, 会用ssh访问Ubuntu, 所以要先安装下ssh. sudo apt install net-tools sudo apt-get install openssh-server 然后补一些必要的库: sudo apt-get install build-essential cmake git libgtk2.0-dev pkg-config libavcodec-dev libavformat-dev libswscale-dev 用wget下载OpenCV3.X, 这里是3.4.7 sudo apt-get install wget wg...

2019-10-23

622

前言现在聊的 topic 是分布式系统，面试官跟你聊完了 dubbo 相关的一些问题之后，已经确认你对分布式服务框架/RPC框架基本都有一些认知了。那么他可能开始要跟你聊分布式相关的其它问题了。分布式锁这个东西，很常用的，你做 Java 系统开发，分布式系统，可能会有一些场景会用到。最常用的分布式锁就是基于 zookeeper 来实现的。其实说实话，问这个问题，一般就是看看你是否了解 zookeeper，因为 zookeeper 是分布式系统中很常见的一个基础系统。而且问的话常问的就是说 zookeeper 的使用场景是什么？看你知道不知道一些基本的使用场景。但是其实 zookeeper 挖深了自然是可以问的很深很深的。面试题剖析大致来说，zookeeper 的使用场景如下，我就举几个简单的，大家能说几个就好了：分布式协调分布式锁元数据/配置信息管理HA高可用性分布式协调这个其实是 zookeeper 很经典的一个用法，简单来说，就好比，你 A 系统发送个请求到 mq，然后 B 系统消息消费之后处理了。那 A 系统如何知道 B 系统的处理结果？用 zookeeper 就可以实...

2019-10-23

630

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

探秘 Cassandra 数据文件合并优化

前言

数据文件合并（Compaction）

SSTable: Sorted String Table

CV预备(三): Ubuntu18.04下OpenCV3.X环境搭建

面试题：4个zookeeper的应用场景，你知道几个？

相关文章

发表评论

资源下载

Mario

Nacos

Spring

Sublime Text

欢迎您来访！