菜单
平台

Marquez

May 2020
评估?

Marquez 是相对年轻的开源项目,用于数据生态系统中元数据的采集和托管。它使用简单的数据模型,来表现诸如世袭(lineage)、上下游数据处理作业及其状态之类的元数据,并用灵活的标签标记数据集的属性。Marquez 提供了简单的 RESTful API 来管理元数据,从而简化了与数据生态系统中其他工具集的集成。

我们已将Marquez作为起点,轻松对其进行扩展,以适应需求,例如执行安全策略,并改用其领域语言等。如果需要一个小巧简单的工具,来完成数据处理作业和数据集的存储和可视化,那么 Marquez 是一个很好的开始。