什么是 YARN?它和 Spark 的关系是什么?
What is YARN?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: easy
分类: Spark on YARN, Cluster Resource Management
标签: yarn, hadoop, resource-management, spark, cluster
参考答案摘要
YARN 是什么? YARN(Yet Another Resource Negotiator) 是 Hadoop 生态中的 资源管理与作业调度平台 。在 Spark 场景中,YARN 常被用作 Spark 的集群资源管理器,负责在集群中协调资源分配,使 Spark 能在大规模集群上稳定运行。 Spark 与 YARN 的关系 YARN 可作为 Spark 的 Cluster Manager ,提供...
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。