从多种异构来源接入数据时如何保证质量与一致性?
How would you ensure data quality and integrity when ingesting from heterogeneous sources?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: hard
分类: data-engineering
标签: Schema Validation, Profiling, Dedup
参考答案摘要
通过 schema 校验、规则校验、去重与数据画像;对异常进行记录,并通过规则修复或人工介入纠正。
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。