什么是 Worker Node？它包含哪些关键组件？

What do you understand by a Worker node?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: easy

分类: Spark Architecture, Cluster Components

标签: worker-node, spark-worker, executors, storage, compute-node

参考答案摘要

Worker Node 定义 Worker node 指集群中任何可以运行应用代码的节点，是 Spark 集群中执行实际计算任务的 计算节点 。 关键组件 Spark Worker ：每个 worker node 上运行的 Worker 进程，负责启动 executors 并管理节点资源。 Executors ：运行在 worker 上的 JVM 进程，执行 tasks。每个 executor 会...

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。