Soda Core

Soda Core 是一个开源数据质量与可观测性工具。我们的团队已经使用它来验证数据在到达系统之前和之后的转换，并设置自动化监测检查以检测异常情况。我们对 Soda Core 中用于编写数据检查的 DSL —— SodaCL 非常满意. SodaCL 能帮助除了数据工程师以外的其他团队成员来编写质量检查。总的来说，我们在解决大规模数据问题时使用 Soda Core 的体验非常好。

Soda Core 是一个开源数据质量与可观测性工具。我们在之前的技术雷达上讨论过 Great Expectations，而 Soda Core 作为另一种解决方案，其关键区别在于数据校验可以通过一种称为 SodaCL （之前称为 Soda SQL）的 DSL 来表示，而非 Python 函数。数据校验一旦被写好就可以作为数据流水线 的一部分被执行，也可以通过编程方式调度运行。随着我们越来越多地受数据驱动，数据质量的维护变得至关重要，因此我们建议你评估 Soda Core。