TiFlash —— TiDB 的分析引擎-低调大师

TiFlash —— TiDB 的分析引擎

2022-04-13 877

TiFlash 是 TiDB 的组件。它主要在 TiDB 的混合事务/分析处理（HTAP）架构中扮演分析处理（AP）的角色。 TiFlash 通过 Raft logs 实时同步 TiKV 的数据更新，延迟时间为亚秒级。TiFlash 利用大规模并行处理（MPP）计算架构来加速分析工作负载。

TiFlash 的框架代码基于 ClickHouse。

构建 TiFlash

TiFlash 支持在以下硬件架构上构建：

x86-64/amd64
aarch64

以及以下操作系统：

Linux
macOS

Checkout 源代码

假设 $WORKSPACE 是放置 TiFlash 仓库的目录。

cd $WORKSPACE
git clone --recursive https://github.com/pingcap/tiflash.git

准备先决条件

所有平台都需要以下软件包：

CMake 3.21.0+
Rust：推荐使用 rustup 安装：

curl https://sh.rustup.rs -sSf | sh -s -- -y --profile minimal --default-toolchain nightly
source $HOME/.cargo/env

Python 3.0+
Ninja 或 GNU Make

构建

假设 $BUILD 是你要构建 TiFlash 的目录。

对于 Ninja

cd $BUILD
cmake $WORKSPACE/tiflash -Gninja
ninja tiflash

对于 GNU Make：

cd $BUILD
cmake $WORKSPACE/tiflash
make tiflash -j

构建完成后，可以在$BUILD/dbms/src/Server/tiflash获取 TiFlash 二进制文件

微信关注我们

原文链接：https://www.oschina.net/p/tiflash

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

每日一博 | 解析分布式系统的缓存设计

一、缓存简介 1.1 什么是缓存缓存就是数据交换的缓冲区。缓存的本质是一个内存 Hash。缓存是一种利用空间换时间的设计，其目标就是更快、更近：极大的提高。将数据写入/读取速度更快的存储（设备）；将数据缓存到离应用最近的位置；将数据缓存到离用户最近的位置。缓存是用于存储数据的硬件或软件的组成部分，以使得后续更快访问相应的数据。缓存中的数据可能是提前计算好的结果、数据的副本等。典型的应用场景：有 cpu cache, 磁盘 cache 等。本文中提及到缓存主要是指互联网应用中所使用的缓存组件。缓存命中率是缓存的重要度量指标，命中率越高越好。缓存命中率 = 从缓存中读取次数 / 总读取次数 1.2 何时需要缓存引入缓存，会增加系统的复杂度。所以，引入缓存前，需要先权衡是否值得，考量点如下： CPU 开销- 如果应用某个计算需要消耗大量 CPU，可以考虑缓存其计算结果。典型场景：复杂的、频繁调用的正则计算；分布式计算中间状态等。 IO 开销- 如果数据库连接池比较繁忙，可以考虑缓存其查询结果。在数据层引入缓存，有以下几个好处：提升数据读取速度。提升系统扩展能力，通过扩展...

2022-04-13

449

恰逢 Go+ 进入两周年的时间，七牛云创始人兼 CEO、Go+ 语言创造者许式伟 (@xushiwei) 发布了一篇名为《Go+ 两周年：我们遇到过的那些坑》的文章，具体内容如下：在开发过程中，可能会因为各种原因导致重构的发生。有的是因为历史包袱（代码经过太多轮次的演进已经不堪重负），有的是因为业务理解（接触这个领域时间比较短，对需求的理解不深刻），有的是因为技术选型（以前用了 A 方案，现在想改成 B）。但是让你印象最深，重构次数最多的模块（或功能）是什么？今天就 Go+ 开发进入 2 周年的时间（Go+ 史前时代：Go+ 代码仓库是 2015 年 12 月建立，当时它并不是 Go+，而是作为 qlang 这个脚本语言的仓库。就像 Go 的代码仓库提交记录特意追溯到 C 语言的诞生史一样，Go+ 仓库以 qlang 作为起点是因为两者有一些发展上的渊源，但是从语言角度来说，两者并无任何关系。Go+ 语言诞生日：第一行代码是 2020 年 3 月 30 日提交。第一个体验版：v0.6.01，该版本代码最后提交的时间是 5 月 23 日），我想借此机会聊聊我们在这两年中遇到的坑。 G...

2022-04-13

522

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。