什么是 Spark DataFrame？它和传统数据表有什么关系？

What are Spark DataFrames?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: easy

分类: Spark SQL, DataFrames

标签: dataframe, schema, sql-like, big-data-optimized

参考答案摘要

定义 DataFrame 是以 SQL 风格列（columns）组织的数据集。概念上类似关系型数据库中的表，或 R/Python 中的 DataFrame。 Spark DataFrame 的特点 与传统表结构类似（行 + 列）。 针对大数据优化 ：Spark DataFrames 在执行与优化层面更适合处理大规模数据。

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。