独立数据工程团队

组织独立数据工程团队来开发和拥有数据管道和产品——与它们服务的流对齐业务域分离——是一种会导致效率低下和业务成果薄弱的反模式。这种结构重复了过去隔离 DevOps、测试 或 部署 功能的错误，创造了知识孤岛、瓶颈和浪费的精力。若没有密切协作，数据工程师往往缺乏设计有意义的数据产品所需的业务和领域上下文，限制了采用的可能性和价值。相比之下，数据平台团队应该专注于维护共享基础设施，而由跨职能业务团队遵循数据网格原则构建和落地他们的数据产品。我们将这种做法置于“暂缓”状态，旨在劝退各自为政的组织模式——尤其是在对领域信息丰富、可用于人工智能的数据的需求持续增长的情况下。