什么是 OutputCommitter？它在任务输出提交中做什么？

What is OutputCommitter?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: hard

分类: Job Output, Commit Protocol

标签: outputcommitter, jobsetup, taskcleanup, temp-output

参考答案摘要

OutputCommitter 定义 OutputCommitter 负责描述 MapReduce 作业输出提交（commit）的全过程。框架依赖它完成 job/task 的 setup、commit 与 cleanup。 主要操作 在 job 初始化时创建临时输出目录（JobSetup）。 设置 task 的临时输出目录（Task setup）。 判断 task 是否需要 commit，并执行 ...

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。