Apache Airflow 3 正式发布,开源分布式工作流平台
Apache Airflow 3.0.0 已正式发布。公告写道,这是“四年磨一剑的重磅更新”: Airflow 3.0 是 Airflow 历史上最大的发布——2.0 版本于 2020 年推出,过去 4 年见证了每季度都有增量更新和发布,2024 年第四季度发布了 2.10 版本。 随着 Airflow 的月度下载量超过 3000 万次(自 2020 年以来增长了 30 倍以上),以及现在有 80000 个组织(2020 年为 25000 个)正在使用 Airflow,自 2.0 版本以来,我们见证了其流行度的惊人增长。 Apache Airflow 3 更新亮点: Airflow 3 对数据从业者来说使用起来更加简单,新变化包括基于 React 的新 UI、DAG 版本控制和改进的 Backfill 支持 在资产导向型工作流和任务导向型工作流之间无缝的 UI 过渡非常美观。Airflow 再次让开发者选择他们想要如何开发和导航,而不强加任何限制。 事件驱动调度的引入使 Airflow 能够无缝集成消息提供者,并对外部 Airflow 发生的事件和数据资产更新做出反应。 通过引入任务执...
