JobTracker 如何完成 job scheduling？它如何处理失败任务？

Explain job scheduling through JobTracker.

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: medium

分类: Job Scheduling, Fault Handling

标签: jobtracker, tasktracker, heartbeat, resubmit, blacklist

参考答案摘要

JobTracker 的调度流程 JobTracker 与 NameNode 通信，确定数据位置，并把任务提交到 TaskTracker 节点执行。 TaskTracker 会通过 heartbeat 向 JobTracker 汇报状态与失败信息。 当发生失败时，JobTracker 负责做决策：例如重新提交任务（resubmit），或标记某些节点/记录不可靠并进行黑名单处理（blacklist）...

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。