开发者社区> 问答> 正文

Spark中将DAG划分为Stage的划分依据是什么?

Spark中将DAG划分为Stage的划分依据是什么?

展开
收起
芯在这 2021-12-10 22:32:50 727 0
1 条回答
写回答
取消 提交回答
  • 划分依据:Stage划分的依据就是宽依赖,何时产生宽依赖,reduceByKey, groupByKey等算子,会导致宽依赖的产生。

    2021-12-10 22:33:01
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载