开发者社区> 问答> 正文

MapReduce中Reduce Join工作原理的缺点及解决方案是什么?

MapReduce中Reduce Join工作原理的缺点及解决方案是什么?

展开
收起
游客daliwbfb2wo66 2021-12-04 20:51:10 349 0
1 条回答
写回答
取消 提交回答
  • 1.缺点:这种方式,合并的操作是在Reduce阶段完成,Reduce端的处理压力太大,Map节点的运算负载则很低,资源利用率不高,且在Reduce阶段极易产生数据倾斜

    2.解决方案:Map端实现数据合并

    2021-12-04 20:51:28
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
基于E-MapReduce梨视频推荐系统 立即下载
大数据解决方案构建详解 以阿里云E-MapReduce为例 立即下载
阿里云E-MapReduce 立即下载