Pig 执行环境有哪些重要组件?
What are the significant components in the execution environment of Pig?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: hard
分类: Pig, 执行流程
标签: pig, scripts, parser, optimizer, compiler, execution-engine, udf, dag
参考答案摘要
Pig 执行环境组件 Pig Scripts :包含 UDF 与内置 operator 的 Pig 脚本,送入执行环境。 Parser :检查语法并做 type checking;输出 DAG。 Optimizer :执行 transform/merge 等优化,减少 pipeline 数据量。 Compiler :自动将优化后的代码转换为 MapReduce job。 Execution Eng...
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。