开发者社区> 问答> 正文

mr的内部工作流程是什么?

mr的内部工作流程是什么?

展开
收起
真的很搞笑 2021-12-05 16:55:14 303 0
1 条回答
写回答
取消 提交回答
  • appmaster作为调度主管,管理maptask和reducetask

    Appmaster负责启动、监控maptask和reducetask

    Maptask处理完成之后,appmaster会监控到,然后将其输出结果通知给reducetask,然后reducetask从map端拉取文件,然后处理;

    当reduce阶段全部完成之后,appmaster还要向resourcemanager注销自己

    2021-12-05 16:59:02
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Flink中的两类新型状态存储 立即下载
基于streaming构建统一的数据处理引擎的挑战与实践 立即下载
《Pulsar 2.8.0 功能特性概述及规划》 立即下载