开发者社区> 问答> 正文

Hadoop中,Mapreduce操作的mapper和reducer阶段相当于spark中的哪些算子

Hadoop中,Mapreduce操作的mapper和reducer阶段相当于spark中的哪几个算子?

展开
收起
茶什i 2019-10-29 14:00:19 1976 0
1 条回答
写回答
取消 提交回答
  • 相当于spark中的map算子和reduceByKey算子,当然还是有点区别的,MR会自动进行排序的,spark要看你用的是什么partitioner

    2019-10-30 15:02:54
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载

相关实验场景

更多