工作原理
领域团队拥有自己产生的数据,理解其含义,并把它作为数据产品发布:名称可发现、模式有文档、质量有保证、支持渠道明确。平台提供可复用的存储、计算、目录、血缘、访问控制和部署工具,使每个领域不必重建基础设施。联邦治理制定互操作、隐私和安全的全局规则,领域保留本地决策。
数据产品像 API 一样对待:版本化、测试,并由其他团队在约定下消费。中央平台团队负责赋能而不是设卡。治理组包含领域代表,使政策切实可行,并尽可能自动执行。
何时使用
数据网格适合拥有许多领域、中央数据团队已成为瓶颈、且工程成熟度足以支撑分布式归属的大型组织。对于中央团队仍能了解每个数据集的小公司,它并不合适。即便如此,归属和契约的原则仍然有用,无需进行完整重组。
权衡
领域归属改善上下文、减少交接,但如果自助层薄弱,也会碎片化标准并重复平台工作。联邦治理建立缓慢,且容易流于形式。可发现性变得关键:没有强大的目录和血缘,分析人员找不到或无法信任数据产品。转型成本是组织性的,不只是技术性的。
示例与误解
零售商的供应链团队把 inventory_position 发布为数据产品,承诺每日新鲜度、模式契约和负责人。财务团队直接消费,无需请求中央数据团队构建管道。平台负责存储和访问,治理在全球范围执行 PII 规则。
误解是数据网格消除了集中化。它分散的是数据归属,但有意识地集中平台能力和互操作标准。