分布式 join 时如何处理数据倾斜?
How can skewness be handled during join operations in distributed processing?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: hard
分类: data-engineering
标签: Join Skew, Salting, Broadcast
参考答案摘要
可通过 key 加盐(salting)、广播小表(broadcast join)、重新分区(repartition)等方式平衡各节点负载。
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。