Master
Published: Apr 13, 2021
Apr 2021
评估?

Dagster 是一个用于机器学习、机器分析,以及纯 ETL 数据管道的开源数据编排框架。与其他任务驱动框架不同,Dagster 知晓流经流水线的数据并可以提供类型安全性。借助对流水线和产生资产的统一视图,Dagster 可以计划和编排 Pandas,Spark,SQL,或任何 Python 可调用的接口。该框架相对较新,我们建议您对其在数据流水线中的能力进行评估。