开发者社区> 问答> 正文

Repartition和Coalesce 有什么关系?

Repartition和Coalesce 有什么关系?

展开
收起
芯在这 2021-12-06 23:15:06 271 0
1 条回答
写回答
取消 提交回答
  • 两者都是用来改变RDD的partition数量的,repartition底层调用的就是coalesce方法:coalesce(numPartitions, shuffle = true)

    2021-12-06 23:15:17
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
对 2000 多亿条数据做一次 group by 需要多久? 立即下载
对2000多亿条数据做一次Group By 需要多久 立即下载
Get rid of traditional ETL, Move to Spark! 立即下载