发布于 : May 19, 2020
不在本期内容中
这一条目不在当前版本的技术雷达中。如果它出现在最近几期中,那么它很有可能仍然具有相关参考价值。如果这一条目出现在更早的雷达中,那么它很有可能已经不再具有相关性,我们的评估将不再适用于当下。很遗憾我们没有足够的带宽来持续评估以往的雷达内容。
了解更多
May 2020
评估
Marquez 是相对年轻的开源项目,用于数据生态系统中元数据的采集和托管。它使用简单的数据模型,来表现诸如世袭(lineage)、上下游数据处理作业及其状态之类的元数据,并用灵活的标签标记数据集的属性。Marquez 提供了简单的 RESTful API 来管理元数据,从而简化了与数据生态系统中其他工具集的集成。
我们已将Marquez作为起点,轻松对其进行扩展,以适应需求,例如执行安全策略,并改用其领域语言等。如果需要一个小巧简单的工具,来完成数据处理作业和数据集的存储和可视化,那么 Marquez 是一个很好的开始。