Timeplus-Proton —— 流数据引擎
Proton 是一个集成了流数据和历史数据处理功能的引擎。它帮助数据工程师和平台工程师解决复杂的实时分析用例,并支持 Timeplus 流分析平台。
Proton 通过流式和OLAP数据处理扩展了受欢迎的 ClickHouse 项目的历史数据、存储和计算功能。
为什么要使用 Proton?
- 一个统一的、轻量级的引擎,以高效和强大的性能连接流数据和历史数据处理任务。
- 具有强大的流式和分析功能的流畅开发人员体验。
- 使用 Proton 的单可执行程序文件和无需外部服务依赖的灵活部署。
- 与其他分析框架相比,拥有较低的总体拥有成本。
- 还内置了强大的流式和分析功能的支持:
功能描述
- 数据转换 清洗敏感字段,从原始数据中派生新列,或将标识符转换为可读信息。
- 流合并 结合来自不同来源的数据,以提供结果流的新鲜性。
- 流聚合 开发人员友好的函数,用于从流数据和历史数据中提取见解。
- 窗口流处理 (滚动 / 跳跃 / 会话) 收集流式数据的有见地的快照。
- 子流 维护单独的水位线和流窗口。
- 数据修订处理 (变更日志) 创建和管理具有主键和更改数据捕获 (CDC) 语义的非追加流。
- 联合流查询 查询外部系统 (例如 Kafka) 中的流式数据,而无需复制它们。
- 物化视图 创建长时间运行且内部存储的查询。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
每日一博 | ZGC 关键技术分析
一、引言 垃圾回收对于Javaer来说是一个绕不开的话题,工作中涉及到的调优工作也经常围绕垃圾回收器展开。面对不同的业务场景没有一个统一的垃圾回收器能保证可GC性能。因此对程序员来说不仅要会编写业务代码,同时也要卷一下JVM底层原理和调优知识。这种局面可能因为ZGC的出现而发生改变,新一代回收器ZGC几乎不需要调优的情况下GC停顿时间可以降低到亚秒级。 Oracle从JDK11开始正式引入ZGC,ZGC设计三大目标: 支持TB级内存 (8M~4TB) 。 停顿时间控制在10ms之内 (生产环境实际观测在微秒级) ,停顿不会随着堆的大小,或者活跃对象的大小而增加。 对程序吞吐量影响小于15%。 ZGC是如何设计怎么达到这个目标的呢?本文将从ZGC算法的关键特性入手,通过分析ZGC周期处理过程来理解这些特性,探索ZGC设计思想。 二、ZGC术语 非分代:将对内存划分为新生代和老年代 (G1已经逻辑分代) ,ZGC取消分代设计,每个GC周期都将标记整个堆中的所有活动对象。 页面: ZGC将堆空间分解成一块块区域,这些区域叫做页面,ZGC通过页面来回收内存。 并发性: GC和线程和业务线程同时...
- 下一篇
Mojo🔥编程语言发布 Mac 版本,继续遥遥领先
AI 编程语言 Mojo🔥 推出了支持 Mac 平台的版本,其创始人Chris Lattner 称 Mojo + Apple Silicon 是强强联合,强上加强。 Mojo🔥 是 Modular AI 公司开发的新编程语言,它结合了 Python 的易用性以及 C 语言的可移植性和性能,目标是使其成为 AI 研究和生产的理想选择。 下载地址:https://developer.modular.com/download 开发者需要先注册Modular 账号,然后通过 Homebrew 包管理器下载 Modular CLI,接着运行 module install mojo 命令来安装 Mojo。 下面是运行 "Hello Mojo" 的示例截图: 此外,Mojo SDK 还提供了 Visual Studio Code 扩展。 Mojo 团队介绍称,Mojo 语言可以充分利用 Mac CPU 内核和矢量单元来实现加速。根据他们提供的测试——使用 matmul.mojo 运行一个矩阵乘法示例。在 Apple MacBook Pro M2 Max 上,与纯 Python 实现的版本相比,M...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- Hadoop3单机部署,实现最简伪集群
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- CentOS7,CentOS8安装Elasticsearch6.8.6
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- CentOS8编译安装MySQL8.0.19
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- SpringBoot2初体验,简单认识spring boot2并且搭建基础工程