如何在 Sqoop 命令中控制 mapper 数量？

Using Sqoop command, how can we control the number of mappers?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: easy

分类: Sqoop 性能调优, 并行度控制

标签: Sqoop, mappers, --num-mappers, -m, parallelism

参考答案摘要

核心答案 可以通过 -m 或 --num-mappers 参数控制 Sqoop import/export 时提交的 map task 数量，也就是并行度。 -m --num-mappers 注意： mapper 数量越多导入越并行，但可能会对数据库端造成更大压力。通常建议从小数值开始测试，再逐步调高。

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。