如何确保 Databricks 数据处理管道中的数据质量？

How do you ensure data quality in Databricks data processing pipelines?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: medium

分类: Databricks, Company: Databricks

标签: Databricks, Data Processing

参考答案摘要

答案 在关键节点做校验（schema、唯一性、范围、null 率、referential integrity），把规则自动化并失败即告警/阻断。 异常数据分流隔离并可回放；用 Delta time travel/审计表确保可追溯与可恢复。

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。