Fugue

在数据工程领域，可选用工具和技术数量之多，让人眼花缭乱。 对于经验较少的工程师，借助一个抽象层来接触这些工具未尝不是一种合理的对策。这让他们能够专注于手头的任务，而不必分心去学习各个技术专用的 API，并且可以不费力地配置不同的底层实现技术。 Fugue 就是这样一个抽象层。 它为分布式计算提供统一的接口，使得在 Spark、Dask、Ray 和 DuckDB 经过较少的修改就能运行Python、pandas 和 SQL 代码。 不过，如果团队已经决定采用某一组确定的技术，并且熟悉这些技术的 API，能够对工具的系统底层做深入的调整和设置，那么这样的抽象层提供的价值就会降低。