Databricks 上性能调优的最佳实践有哪些？

What are the best practices for performance tuning?

题目类型: 技术面试题

这是一道技术面试题，常见于澳洲IT公司面试中。

难度: hard

分类: Databricks, Company: Databricks

标签: Databricks, Tuning

参考答案摘要

答案 数据布局：Parquet/Delta，控制文件大小避免小文件；分区与聚簇（Z-ORDER）提升剪枝；按策略做 OPTIMIZE/VACUUM。 执行层：优先 DataFrame/Spark SQL，合理设置并行度与 shuffle partitions，启用 AQE，选择合适 join 策略，并用 Spark UI 做证据驱动调参。

本题提供 STAR 原则详细解答和技术解析，登录匠人学院学习中心即可查看完整答案。