Serverless 数仓技术与挑战 - 张雁飞

Serverless 数仓技术与挑战 - 张雁飞｜3306π

2023-09-14 539 89

09月16日（本周六）下午，Databend Labs 联合创始人张雁飞将作为嘉宾参与由 3306π 组织的「 3306π 数据库朋友圈」主题分享。

在本次分享中，我们将介绍一款新型 Serverless 数仓技术。该技术旨在解决传统数仓在扩展性、成本和管理上的局限性，能够大幅提升性能并降低成本。我们还将探讨 Serverless 数仓面临的技术挑战。

🙋 议题方向：

传统数仓架构的局限性
理想的 Serverless 数仓架构
如何实现 Serverless 数仓以及有哪些挑战

嘉宾介绍

张雁飞，Databend Labs 联合创始人

前阿里云数据库内核组早期成员、前青云数据库团队负责人。开源 Databend 项目主要负责人。

公司介绍

Databend Labs 成立于 2021 年 3 月，是一家开源 Data Cloud 服务商，核心团队成员来自 ClickHouse 社区、谷歌 Anthos、阿里云等国内外知名互联网和云计算公司，团队在云原生数据库领域有着丰富的工程经验，研发人员分布在中、美两地，同时也是数据库开源社区活跃贡献者。

公司的核心业务包括：基于对象存储构建的开源云原生数据仓库 Databend ；基于 Databend 的商业产品，为 Databend 用户提供技术支持商业服务；以及研发和推广基于 Databend 打造的易用、低成本、高性能的新一代大数据分析平台 Databend Cloud 。

公司产品

Databend Cloud 是基于开源云原生数仓项目 Databend 打造的一款易用、低成本、高性能的新一代大数据分析平台，实现按需、按量付费的 Data Cloud，让你专注于数据价值的挖掘，算你所想。

3306π 数据库朋友圈

👨🏻‍💻 3306π 数据库朋友圈：🔗 https://www.huodongxing.com/event/1716596158000![图片]

⏰ 活动时间：2023年9月16日 13:00 - 18:00

🗺️ 活动地点：北京市朝阳区酒仙桥路6号院2号楼360大厦A座F1发布厅

🙋 提前提问地址：

🔗 https://docs.qq.com/form/page/DTlVDVEtqcFFTQWhz!

微信关注我们

原文链接：https://my.oschina.net/u/5489811/blog/10110440

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2023-09-14 16:56:00

典型场景 | PolarDB-X 如何支撑 SaaS 多租户

SaaS多租户背景很多平台类应用或系统（如电商CRM平台、仓库订单平台等等），它们的服务模型是围绕用户维度（这里的用户维度可以是一个卖家或品牌，可以是一个仓库，等等）展开的。因此，这类型的平台业务，为了支持业务系统的水平扩展性，业务的数据库通常是按用户维度进行水平切分。可是，当平台类应用的一些用户慢慢成长为大用户（比如大品牌、大卖家、大仓库等）后，这些大用户由于其数据量或流量明显要比其它用户多得多，容易导致以下的现象大用户所在分片会成为业务系统的热点，占用大量的数据库资源，其服务质量容易因资源受限导致不稳定；其它小用户容易受到大用户资源消耗的影响，服务质量也受到影响。最后就整个平台的业务系统的热点频现，数据库访问不稳定，业务服务受影响。 SaaS多租户模型作为一种应用的架构，常用来解决业务的上述问题。在SaaS多租户模型中，业务系统会需要服务多个用户，每个用户（或每批用户）可以被视为一个租户。这些不同的租户在业务系统内会使用共同的基础设施及其平台进行运行，但来自不同租户的数据仍将被独立隔离，因此，通常租户拥有自己物理资源来单独存储与管理数据。所以，SaaS多租户解决业务系统...

824

2023-09-14 15:33:00

FreeFileSync 13.0 发布，文件夹比较与同步软件

FreeFileSync 是一款开源软件，适用于 Windows、macOS 和 Linux。FreeFileSync 本质是一个用于文件夹对比和同步的软件，它可以创建和管理所有重要文件的备份副本。FreeFileSync 不是每次都复制每个文件，而是确定源文件夹和目标文件夹之间的差异，并只传输所需的最低数据量。 FreeFileSync 13.0更新内容如下：手动重命名（多个）文件（F2 键）为基于 DB 的同步配置单个方向使用“Update”同步变量检测移动的文件（需要sync.ffs_db文件） Update variant：不恢复在 target 上删除的文件区分文件重命名和文件移动并简化网格显示修复了复制具有 NTFS 扩展属性的文件时出现的 ERROR_NOT_SUPPORTED 修复了连接快速启动时进程初始化期间的错误在复制过程中设置文件时间时避免重复重新打开文件双击时设置工作目录以匹配 FFS 配置文件 (Linux) 更新说明：https://freefilesync.org/

375

资源下载

更多资源

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。