OpenLineage 作为新的沙箱项目加入 LF AI & Data
LF AI & Data 基金会——该组织正在构建一个生态系统,以支持人工智能(AI)和数据开源项目的开源创新——今天宣布OpenLineage[1]为其最新的沙箱项目。
由 Datakin 发布并开放源码的 OpenLineage 是元数据和谱系收集的开放标准,旨在检测正在运行的作业。它定义了使用一致命名策略识别的运行、作业和数据集实体的通用模型。核心谱系模型是可扩展的,通过定义特定的方面来丰富这些实体。
OpenLineage 是一个跨行业的项目,涉及来自主要开源数据项目的贡献者,包括 LF AI & Data 项目:Marquez、Amundesen 和 Egeria。如果没有 OpenLineage,项目必须检测所有作业,并且集成是外部的,这可能会破坏新版本。当使用 OpenLineage 时,集成的工作是共享的,可以在每个项目中推进集成,这意味着用户不需要追赶。
没有 OpenLineage
使用 OpenLineage
LF AI & Data 执行董事 Ibrahim Haddad 博士说:“我们非常高兴地欢迎 OpenLineage 项目加入 LF AI & Data。该项目解决了管理人工智能和数据项目的一个关键组件,并进一步扩展了我们托管技术项目组合的健壮性。我们期待与 OpenLineage 项目合作,在生态系统中扩大项目的足迹,扩大采用者和贡献者的社区,并促进与我们的成员和其他相关项目的合作机会。”
OpenLineage 创始人 Julien Le Dem 说:“数据谱系是一个复杂而多维的问题;最好的解决方案是直接观察数据通过异构管道的移动。这需要广泛的行业协调,而 Linux 基金会正是以这种协调而闻名。OpenLineage 能够成为 LF AI & Data 项目,我们感到非常自豪,并期待与之继续合作。”
LF AI & Data 通过广泛的服务支持项目,第一步是作为孵化项目加入。在GitHub[2]上了解更多关于 OpenLineage 的信息,并确保加入OpenLineage-Announce[3]和OpenLineage-Technical-Discuss[4]邮件列表,加入社区并保持联系。
热烈欢迎 OpenLineage!我们期待该项目作为 LF AI & Data 基金会的一部分继续增长和成功。要了解如何与我们一起托管一个开源项目,请访问LF AI & Data 网站[5]。
参考资料
[1]OpenLineage: https://github.com/OpenLineage/OpenLineage
[2]GitHub: https://github.com/OpenLineage/OpenLineage
[3]OpenLineage-Announce: https://lists.lfaidata.foundation/g/openlineage-announce
[4]OpenLineage-Technical-Discuss: https://lists.lfaidata.foundation/g/openlineage-technical-discuss
[5]LF AI & Data 网站: https://lfaidata.foundation/proposal-and-hosting-process/

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Apache Doris 社区喜迎 4 位新晋 Committer 成员
关于 Apache Doris(Incubating) Apache Doris 是一款基于 MPP 的分析型数据库系统。 其简洁的架构,能够帮助用户在不依赖任何第三方系统的情况下,快速搭建一个高性能、高可靠、高可用、易扩展的分布式数据库。 Doris全面兼容标准的 SQL 语法,支持 MySQL 协议,拥有完备的分布式管理框架和 MPP 查询框架,并且提供列式存储、向量化执行、预聚合引擎、分级存储等众多高级特性。不仅能够轻松应对上万 QPS 的在线报表场景,也能够在高吞吐的即席查询场景快速进行数据分析。 Apache Doris 社区喜迎 4 位 Committer成员 大家好,在 2021 年二季度下旬,经过 Apache Doris PPMC (孵化器项目管理委员会)的推荐和投票,Doris 社区迎来了 4 位新晋 Committer 。 他们分别是来自美团的刘立家(Github ID:liutang123)和来自小米的赖迎春(Github ID:acelyc111)、汪细勖(Github ID:xinghuayu007)、魏祚(Github ID:weizuo93),在此感谢他...
- 下一篇
怎样编写好的API?
本文分享自百度开发者中心怎样编写好的API? 本文首先阐述了 RESTful 风格 API 的基础理论知识以及 Richardson 成熟度模型,随后讨论了好的 API 应该具有哪些特征,最后对流行的 API 实现方式,即 GraphQL 和 RESTful,进行了对比。 现在,每个人都在关注 API。API 最早开始流行于大约 20 年前,2000 年,Roy Fielding 在他的博士论文中首次提出了 REST 这个术语。同年,Amazon、Salesforce 和 eBay 向全世界的开发者介绍了他们的 API,永远改变了我们构建软件的方式。 在 REST 之前,Roy Fielding 论文中的原则被称为“HTTP 对象模型”,随后你会明白这为何非常重要。 随着阅读的深入,你还会看到如何确定你的 API 是否成熟,好 API 的主要品质是什么以及为何在构建 API 的时候,要注重适应性。 1RESTful 架构基础 REST 代表表述性状态转移(Representational State Transfer),由 Roy Fielding 在他的博士论文中定义,长期以来,它就...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7,8上快速安装Gitea,搭建Git服务器
- 设置Eclipse缩进为4个空格,增强代码规范
- SpringBoot2全家桶,快速入门学习开发网站教程
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Red5直播服务器,属于Java语言的直播服务器
- CentOS8安装Docker,最新的服务器搭配容器使用
- Docker安装Oracle12C,快速搭建Oracle学习环境
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- SpringBoot2更换Tomcat为Jetty,小型站点的福音