map-side join 和 reduce-side join 有什么区别?
What is the difference between map-side join and reduce-side join?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: hard
分类: MapReduce, Join 策略
标签: map-side-join, reduce-side-join, join, map-phase, structure
参考答案摘要
TL;DR Map-side join 在数据进入 map 阶段时完成 join,但需要更严格的数据结构/前置条件(例如数据需预分区/排序或小表可广播等)。 Reduce-side join 通常在 reduce 阶段做 join,适用范围更广,但 shuffle 成本更高。 根据原文可直接回答的要点 Map-side join:在到达 map 时执行,需要严格结构定义。
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。