什么是 Lazy Evaluation?它在 Spark 中有什么意义?
What is lazy evaluation?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: medium
分类: RDD, Execution Model
标签: lazy-evaluation, transformations, actions, optimization
参考答案摘要
定义 Lazy evaluation 是 Spark 的关键概念:对数据执行的 transformations 不会立刻执行,而是 延迟到 action 触发时才真正计算 。 意义 允许 Spark 在执行前对整个计算链路做优化(如 DAG 优化、stage 划分)。 避免不必要的中间计算,提高整体执行效率。
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。