OpenLineage 作为新的沙箱项目加入 LF AI & Data-低调大师

OpenLineage 作为新的沙箱项目加入 LF AI & Data

2021-07-27 1023

LF AI & Data 基金会——该组织正在构建一个生态系统，以支持人工智能（AI）和数据开源项目的开源创新——今天宣布OpenLineage[1]为其最新的沙箱项目。

由 Datakin 发布并开放源码的 OpenLineage 是元数据和谱系收集的开放标准，旨在检测正在运行的作业。它定义了使用一致命名策略识别的运行、作业和数据集实体的通用模型。核心谱系模型是可扩展的，通过定义特定的方面来丰富这些实体。

OpenLineage 是一个跨行业的项目，涉及来自主要开源数据项目的贡献者，包括 LF AI & Data 项目：Marquez、Amundesen 和 Egeria。如果没有 OpenLineage，项目必须检测所有作业，并且集成是外部的，这可能会破坏新版本。当使用 OpenLineage 时，集成的工作是共享的，可以在每个项目中推进集成，这意味着用户不需要追赶。

没有 OpenLineage

使用 OpenLineage

LF AI & Data 执行董事 Ibrahim Haddad 博士说：“我们非常高兴地欢迎 OpenLineage 项目加入 LF AI & Data。该项目解决了管理人工智能和数据项目的一个关键组件，并进一步扩展了我们托管技术项目组合的健壮性。我们期待与 OpenLineage 项目合作，在生态系统中扩大项目的足迹，扩大采用者和贡献者的社区，并促进与我们的成员和其他相关项目的合作机会。”

OpenLineage 创始人 Julien Le Dem 说：“数据谱系是一个复杂而多维的问题；最好的解决方案是直接观察数据通过异构管道的移动。这需要广泛的行业协调，而 Linux 基金会正是以这种协调而闻名。OpenLineage 能够成为 LF AI & Data 项目，我们感到非常自豪，并期待与之继续合作。”

LF AI & Data 通过广泛的服务支持项目，第一步是作为孵化项目加入。在GitHub[2]上了解更多关于 OpenLineage 的信息，并确保加入OpenLineage-Announce[3]和OpenLineage-Technical-Discuss[4]邮件列表，加入社区并保持联系。

热烈欢迎 OpenLineage！我们期待该项目作为 LF AI & Data 基金会的一部分继续增长和成功。要了解如何与我们一起托管一个开源项目，请访问LF AI & Data 网站[5]。

参考资料

[1]OpenLineage: https://github.com/OpenLineage/OpenLineage

[2]GitHub: https://github.com/OpenLineage/OpenLineage

[3]OpenLineage-Announce: https://lists.lfaidata.foundation/g/openlineage-announce

[4]OpenLineage-Technical-Discuss: https://lists.lfaidata.foundation/g/openlineage-technical-discuss

[5]LF AI & Data 网站: https://lfaidata.foundation/proposal-and-hosting-process/

微信关注我们

原文链接：https://www.oschina.net/news/152372

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Apache Doris 社区喜迎 4 位新晋 Committer 成员

关于 Apache Doris(Incubating) Apache Doris 是一款基于 MPP 的分析型数据库系统。其简洁的架构，能够帮助用户在不依赖任何第三方系统的情况下，快速搭建一个高性能、高可靠、高可用、易扩展的分布式数据库。 Doris全面兼容标准的 SQL 语法，支持 MySQL 协议，拥有完备的分布式管理框架和 MPP 查询框架，并且提供列式存储、向量化执行、预聚合引擎、分级存储等众多高级特性。不仅能够轻松应对上万 QPS 的在线报表场景，也能够在高吞吐的即席查询场景快速进行数据分析。 Apache Doris 社区喜迎 4 位 Committer成员大家好，在 2021 年二季度下旬，经过 Apache Doris PPMC (孵化器项目管理委员会)的推荐和投票，Doris 社区迎来了 4 位新晋 Committer 。他们分别是来自美团的刘立家（Github ID：liutang123）和来自小米的赖迎春（Github ID：acelyc111）、汪细勖（Github ID：xinghuayu007）、魏祚（Github ID：weizuo93），在此感谢他...

2021-07-27

754

本文分享自百度开发者中心怎样编写好的API？本文首先阐述了 RESTful 风格 API 的基础理论知识以及 Richardson 成熟度模型，随后讨论了好的 API 应该具有哪些特征，最后对流行的 API 实现方式，即 GraphQL 和 RESTful，进行了对比。现在，每个人都在关注 API。API 最早开始流行于大约 20 年前，2000 年，Roy Fielding 在他的博士论文中首次提出了 REST 这个术语。同年，Amazon、Salesforce 和 eBay 向全世界的开发者介绍了他们的 API，永远改变了我们构建软件的方式。在 REST 之前，Roy Fielding 论文中的原则被称为“HTTP 对象模型”，随后你会明白这为何非常重要。随着阅读的深入，你还会看到如何确定你的 API 是否成熟，好 API 的主要品质是什么以及为何在构建 API 的时候，要注重适应性。 1RESTful 架构基础 REST 代表表述性状态转移（Representational State Transfer），由 Roy Fielding 在他的博士论文中定义，长期以来，它就...

2021-07-22

553

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。