Databend 亮相 DTCC 2025:存算分离架构引领湖仓一体化
在数字化转型加速推进的今天,实时数据仓库与湖仓一体化架构已成为企业数据平台建设的核心议题。面对海量数据的爆发式增长和日益复杂的业务需求,如何构建既能满足实时性要求,又能兼顾成本效益的现代化数据平台,成为每一位数据架构师面临的重大挑战。8月21-23日,以"智能创新 数赢未来"为主题的第十六届中国数据库技术大会(DTCC 2025)在北京成功举办,Databend作为新一代云原生数据仓库的代表,全方位展示了其在AI时代湖仓一体化建设方面的创新实践与技术突破。
Databend 联合创始人深度思考:AI 时代下的湖仓一体化平台建设
在 DTCC 2025 的「实时数仓与湖仓一体应用实践(上)」专场中,Databend 联合创始人吴炳锡不仅担任专场主持人,更带来了题为《AI 时代下的湖仓一体化平台建设的思考》的深度分享。作为新一代云原生数据仓库的践行者,吴炳锡从技术演进的历史脉络出发,系统回顾了从传统数据库到现代湖仓一体化架构的发展历程。
Databend联合创始人吴炳锡
吴炳锡指出,传统大数据架构面临着架构复杂、组件繁多、运维成本高昂等诸多挑战。在 AI 时代背景下,企业不仅需要处理结构化数据,更要应对多模态数据的融合处理需求。他强调,存算分离架构是解决这些问题的关键技术路径,通过将计算与存储解耦,不仅能够实现资源的弹性扩展,更能显著降低企业的总体拥有成本。
在演讲中,吴炳锡详细阐述了 Databend 在湖仓一体化建设中的创新实践,包括 NoETL 数据汇聚、AI 能力整合、跨机房高可用等核心技术特性。他特别强调了 Databend 在解决传统架构六大经典问题方面的突破,为企业数字化转型提供了全新的技术思路。
客户实践分享:政务大数据存算分离架构的成功应用
在技术专场 16「大数据平台建设」中,福建大数据一级开发有限公司的数据库专家吴世钦带来了《政务大数据存算分离架构建设和应用》的精彩分享,深度解析了 Databend 如何支持政务大数据的应用创新。
福建大数据一级开发有限公司的数据库专家吴世钦
作为省级公共数据资源一体开发主体,福建大数据集团面临着海量政务数据汇聚、治理和服务的巨大挑战。吴世钦详细介绍了他们构建"1+1+3+1+N"一体化公共数据平台体系的实践历程,以及从传统湖仓分离架构向湖仓一体化架构演进的技术路径。
在传统 4.0 架构中,福建大数据集团面临着组件繁多、数据孤岛、频繁搬家、扩展性差等四大核心问题。通过引入Databend 构建存算分离的计算引擎,他们成功实现了 4.1 架构的升级改造。新架构通过构建汇聚集群、治理集群、共享集群和服务集群四大原子能力,实现了一数多用、流批一体和 HTAP 的核心能力。实现了原有:数据汇平台, 数据开发平台,数据开放平,数据只采一次等项目底层数据统一融合。真正实现湖上建仓,一份数据,数据不搬家对多个业务平台提供服务能力。
特别值得关注的是,通过 Databend 的存算分离底层表级跨租户共享能力(Attach table),福建大数据集团彻底解决了数据搬家问题。在人口库治理项目中,涉及十多个厅级、一百多张表的数据融合,通过跨专区共享能力,省去了所有数据搬迁任务。目前该平台已支撑 2000 多亿条公共数据资源的汇聚治理,高效服务于闽政通、数字福建等重要应用场景。
展位互动:直面专家,解锁专属解决方案
在 DTCC 2025 现场,Databend 的【09号】展位成为了技术交流的热点区域。结合实际业务场景,Databend 团队与数百位参会用户进行了深入的技术交流,围绕湖仓选型、迁移策略、架构升级等关键议题展开了热烈讨论。
Databend 展位前用户交流
展位现场不仅展示了 Databend 在高可靠、高性能场景中的广泛应用与成熟生态,更通过丰富的互动活动吸引了大量参会者的关注。数百位用户参与了现场答题互动,赢取了精美手提包、定制 T 恤、魔方、数据线、便携风扇等丰富的社区周边好礼。这些互动不仅增进了用户对 Databend 技术特性的了解,更为后续的深度合作奠定了基础。
Databend 联合创始人王吟为展台观众介绍技术方案
现场工作人员为参会者详细介绍了 Databend 的最新功能特性,包括 Vector 数据类型支持、Remote UDF 能力、多模态数据处理等创新功能。许多用户对 Databend 在成本控制、运维简化、性能优化等方面的优势表现出浓厚兴趣,纷纷就具体的业务场景与技术团队进行深入探讨。
技术创新引领行业发展
通过本次 DTCC 2025 的全方位参与,Databend 不仅展示了其在湖仓一体化领域的技术领先性,更重要的是验证了存算分离架构在实际业务场景中的价值。从理论创新到工程实践,从技术分享到客户案例,Databend 为行业提供了完整的湖仓一体化解决方案。
福建大数据集团的成功实践充分证明了 Databend 技术架构的先进性和实用性。通过存算分离架构,不仅解决了传统大数据平台的核心痛点,更实现了显著的降本增效。数据显示,新架构实现了 6 万多张表的搬迁减少,支持 500 并发以上的高并发查询,97% 以上的查询在1秒内返回结果,数据压缩比达到 2-5 倍,这些成果为政务数字化转型提供了强有力的技术支撑。
展望未来:共建数据技术新生态
第十六届 DTCC 大会为数据库从业者搭建了高质量的交流平台,有效推动了行业知识共享与技术协作。Databend 通过此次大会,不仅展示了云原生数据仓库的先进技术与创新活力,更彰显出深耕数据底层、助力行业数字化转型的决心。
面向 AI 时代的数据处理新挑战,Databend 将持续加码存算分离技术研发与场景适配,不断完善多模态数据处理能力,强化 AI 原生特性。通过与更多行业伙伴的深度合作,Databend 致力于构建开放共赢的数据技术生态,共同推动中国数据库产业走向新的高峰,为企业数字化转型和智能化升级提供更加强大的技术支撑。
关于 Databend
Databend 是一款开源、弹性、低成本,基于对象存储也可以做实时分析的新式湖仓。期待您的关注,一起探索云原生数仓解决方案,打造新一代开源 Data Cloud。
👨💻 Databend Cloud:databend.cn
📖 Databend 文档:docs.databend.cn
💻 Wechat:Databend
✨ GitHub:github.com/databendlab…

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
开源代码编辑器 Zed 推出智能体集成协议:Agent Client Protocol (ACP)
开源编辑器 Zed 宣布推出全新的 Agent Client Protocol (ACP),这一协议让开发者可以在编辑器中自由接入任意第三方智能体(Agent),无需依赖官方内置工具。其理念类似于 语言服务器协议(LSP),通过解耦编辑器与智能体的交互方式,提供更灵活的扩展能力。 https://github.com/zed-industries/agent-client-protocol 首个落地案例是与 Google Gemini CLI 的合作。Zed 已在终端中集成该工具,并通过 JSON-RPC 替代传统的 ANSI 转义码,实现更精准的交互。这让开发者在 Zed 内获得了更流畅的 AI 编程体验: 实时可视化的智能编辑体验 支持多缓冲区(multi-buffer)查看和审阅 在代码与智能体交互之间实现流畅导航 值得注意的是,ACP 协议已经以 Apache 开源许可证发布,任何开发者都可基于它集成自己的 AI Agent。目前不仅 Zed 内置的智能体已迁移到这一统一框架,社区中也有人正探索将 ACP 带到 Neovim 等其他编辑器。这意味着所有为内置 Agent 开发的...
- 下一篇
智联招聘 × Pulsar|Pulsar 客户端在高吞吐场景下的内存控制实践
> 本文来自 智联招聘 汪苏诚(萧易客) 1. 背景介绍 在现代分布式系统架构中,消息队列作为核心组件承担着系统解耦、流量削峰和异步处理的重要职责。Apache Pulsar 作为云原生时代的统一消息平台,其在高并发、大数据量场景下的表现直接影响着整个系统的稳定性和性能。这其中容易忽视的是在高吞吐场景下的客户端的表现。 在高吞吐的业务场景下,会面临以下技术痛点: 内存溢出风险:高频大消息发送导致客户端内存缓冲区快速增长 线程阻塞问题:不当的配置可能导致异步发送退化为同步阻塞 资源竞争冲突:Producer和Consumer共享内存限制导致相互影响 监控和调优困难:缺乏有效的内存使用监控和调优策略 因此,本篇文章结合了我们对 Pulsar 客户端内存控制的一些理解和实践,希望帮助对大家构建高性能、高可用的分布式系统有所帮助。 2. 消息发送模式分析 在实际业务场景里,有阻塞和非阻塞两种消息发送方式。我们可以按照具体需求,灵活做出选择 。 2.1 同步发送的局限性 同步发送(Blocking Send)是 Pulsar 客户端最基础的消息发送方式。在这种模式下,发送线程会一直阻塞,直...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS6,CentOS7官方镜像安装Oracle11G
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7,CentOS8安装Elasticsearch6.8.6
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- CentOS8编译安装MySQL8.0.19