开发者社区> 问答> 正文

spark当中宽依赖、窄依赖是什么意思?

spark当中宽依赖、窄依赖是什么意思?

展开
收起
游客ahv54x37wvm7u 2021-12-12 21:02:59 755 0
1 条回答
写回答
取消 提交回答
  • 窄依赖指的是每一个 parent RDD 的 partition 最多被子 RDD 的一个 partition 使用(一子一亲) 宽依赖指的是多个子 RDD 的 partition 会依赖同一个 parent RDD的 partition(多子一亲)

    2021-12-12 21:03:37
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载