首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://my.oschina.net/u/8690838/blog/18694936

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

从小时级到分钟级:多点DMALL如何用Apache SeaTunnel把数据集成成本砍到1/3?

作者 | 贾敏 多点DMALL 资深大数据研发工程师 作者介绍 贾敏,多点 DMALL 资深大数据研发工程师,主导公司核心数据集成平台架构设计与 LakeHouse 的技术落地。拥有丰富的大数据平台架构经验,长期专注于PB 级数据实时同步、数据湖建设以及 Spark 计算引擎性能调优等主流大数据技术领域。作为 Active Contributor,持续在多个开源项目如 Apache Spark、Apache Iceberg、Apache Amoro (incubating) 、Volcano、Flink CDC 、Apache SeaTunnel 等贡献并推动相关特性的改进。 多点 DMALL 是一个全球零售智能化解决方案提供商,支撑着 430+ 客户的数字化转型。随着业务快速扩张,数据同步的实时性、资源效率和开发灵活性,成为我们必须攻克的三大难题。 多点DMALL数据平台的四次跃迁 多点 DMALL 的数据平台经过四次跃迁,始终围绕“更快、更省、更稳”展开。 在多点 DMALL 的数据平台建设过程中,先是借 AWS-EMR 快速构建云端大数据能力,再回归IDC 自建 Hadoop 集...

lamp-cloud 5.6.0 发布, 他升级了这些功能...

变更日志(2025 年 10 月 9 日) 1. 核心优化:字典数据请求机制重构 (重大变更) 背景:在 lamp-web-max-vben 项目中,优化了 fast-crud 和 vxe-table 组件的字典数据请求机制。 优化前:页面上每个使用到字典的字段,在每次打开页面时都会重复请求后端,导致性能开销大。 优化后: 页面刷新时,系统会一次性请求DictEnum类中配置的所有字典值。 后端返回的数据会被缓存到 Pinia (dictStore) 中。 后续页面需要使用字典数据时,将直接从dictStore的缓存中获取,避免了重复请求。 2. 功能新增 (Feat) 2.1. 字典管理功能重构 新增字段: 字典分组:用于对数据字典进行分组管理。 数据类型:[1 - 字符串,2 - 整型,3 - 布尔]。 组件属性:用于配置颜色或类型等属性(替代了原来的css类字段)。 国际化配置:用于解决字典的国际化显示问题。 显示逻辑优化:前端页面显示字典数据时,会优先根据当前语言环境,从 “国际化配置” 中获取对应的值。若未配置,则默认显示 “名称” 字段。 2.2. 新增枚举字典页面 ...

相关文章

发表评论

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Apache Tomcat

Apache Tomcat

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

Eclipse

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。幸运的是,Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Kit,JDK)。

JDK

JDK

JDK是 Java 语言的软件开发工具包,主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心,它包含了JAVA的运行环境(JVM+Java系统类库)和JAVA工具。