异构数据湖如何做 schema 演进？生产环境如何无停机处理破坏性变更？

Schema evolution strategy for a heterogeneous data lake; handling breaking changes without downtime?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: hard

分类: data-engineering

标签: Schema Evolution, Schema Registry, Avro, Parquet

参考答案摘要

引入支持版本与校验的 Schema Registry（如 Confluent），选用支持演进的格式（Avro/Parquet）；通过前向/后向兼容检查控制变更；对破坏性变更采用数据集版本化与分阶段切换，避免停机与数据丢失。

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。