如果运行 Hadoop 作业时输出目录已经存在,会发生什么?
What happens if you try to run a Hadoop job with an output directory that is already present?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: easy
分类: MapReduce, 常见报错
标签: hadoop, mapreduce, output-directory, exception, hdfs-delete
参考答案摘要
答案 会抛出异常,提示输出目录已存在。运行 MapReduce job 前必须确保 HDFS 上输出目录不存在。 解决方式 Shell 删除: Hadoop fs –rmr /path/to/your/output/ Java API 删除: FileSystem.getlocal(conf).delete(outputDir, true);
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。