如何创建 RDD？

How to create an RDD?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: easy

分类: RDD, Spark API

标签: rdd, sparkcontext, parallelize, hdfs, external-dataset

参考答案摘要

创建 RDD 的两种方式 方式 1：在 Driver 中并行化集合 使用 SparkContext 的 parallelize 方法： IntellipaatData = Array(2,4,6,8,10) val distIntellipaatData = sc.parallelize(IntellipaatData) 方式 2：从外部存储加载数据集 例如从 HDFS 或其他共享文件系统加载外部...

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。