Apache Pig 架构有哪些组件?
What are the components of the Apache Pig architecture?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: hard
分类: Pig 架构, Hadoop 生态
标签: pig, parser, optimizer, compiler, execution-engine, execution-mode, dag, mapreduce
参考答案摘要
TL;DR Apache Pig 架构包含: Parser 、 Optimizer 、 Compiler 、 Execution Engine 、 Execution Mode 。 组件说明 Parser :处理 Pig 脚本并检查语法。 Optimizer :做逻辑优化(例如 projection pushdown),接收逻辑计划(DAG)。 Compiler :把逻辑计划转换成一系列 MapR...
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。