开发者社区> 问答> 正文

sparkSQL执行的流程是什么?

sparkSQL执行的流程是什么?

展开
收起
芯在这 2021-12-11 22:24:41 251 0
1 条回答
写回答
取消 提交回答
  • SQL语句首先通过Parser模块被解析为语法树,此棵树称为Unresolved Logical Plan;Unresolved Logical Plan通过Analyzer模块借助于Catalog中的表信息解析为Logical Plan;此时,Optimizer再通过各种基于规则的优化策略进行深入优化,得到Optimized Logical Plan;优化后的逻辑执行计划依然是逻辑的,并不能被Spark系统理解,此时需要将此逻辑执行计划转换为Physical Plan。

    2021-12-11 22:24:55
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Spark介绍及Spark多数据源分析 立即下载
SparkSQL实践与优化 立即下载
Spark SQL最佳实践 立即下载