首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://www.oschina.net/news/309284/linksaas-0-9-12-released

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

解析云上实时数仓的挑战与实践 | Databend @DTCC 2024 演讲回顾

8 月 22 日 ~ 24 日,由 IT168 联合旗下 ITPUB、ChinaUnix 两大技术社区主办的第 15 届中国数据库技术大会(DTCC2024)在北京朗丽兹西山花园酒店成功召开。本次大会以"自研创新 数智未来"为主题,通过深度交流与探讨,推动数据库技术的自主创新和数智化转型。 作为一家技术领先的数据仓库服务商,Databend 也在本次大会亮相。Databend 联合创始人吴炳锡 在"湖仓一体化技术"技术专场中受邀出席担任主持人,并为观众带来主题为 《解析云上实时数仓的挑战与应对》 的主题分享 。 近年来,IT 技术迅猛发展,尤其是大数据领域更是日新月异。从曾经年薪百万的大数据架构师到如今被戏称为"数据搬砖"的大数据工程师,行业角色的转变令人深思。尤其是在云计算时代,大数据工程师的工作内容似乎更加琐碎,甚至让人感到难以把握。在本次交流中,吴炳锡老师深入剖析了大数据架构及实时数仓的演进与挑战,探讨如何在云环境中实现高效且低成本的数据治理与应用。以下为演讲实录: 大数据技术栈经过多年演进,整个产品架构现在已经变得非常复杂,各种新技术让人眼花缭乱。从最早的 Oracle、Ter...

kettle-manager 0.2.5 版本发布,Kettle 的 Web 调度管理平台

kettle-manager 0.2.5 版本发布,kettle 的 web 调度管理平台 此版本更新内容: 修复作业日志部分场景线程名称中不含作业名导致获取作业名异常的问题 修复新增作业调度时,更新作业状态异常的问题。 更新数据库脚本,解决作业视图可能因为无效数据而重复的情况。 【重要】kettle的数据库连接是获取一次一直用,其中还有各种预编译,整体改造比较麻烦,这种连接使用方式很有问题,其一mysql数据库默认有8小时时限,超时会被强制断开,其二其他意外场景或数据库重启等也会导致连接中断,这种方式有问题就只能重启应用了,mysql也可以采用高级权限修改数据库参数提高超时时长,但最好还是要采用连接池。 本次重新实现了连接重新获取机制,通过druid的机制实现指定时长的连接自动回收,回收后,kettle中的预编译对象都会对应关闭,在kettle中最常用的方法上实现判断重连机制,从而实现kettle的数据库连接定时更换。 此机制已经测试可用。 如下是框架层面升级: 优化获取客户端ip工具方法,多个ip时取第一个 优化系统日志,当代理ip与真实ip不一致时,同时记录两个ip 优化lamb...

相关文章

发表评论

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Apache Tomcat

Apache Tomcat

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

Eclipse

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。幸运的是,Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Kit,JDK)。