开发者社区> 问答> 正文

Spark如何在yarn上运行?

Spark如何在yarn上运行?

展开
收起
游客fq2cv4o24bhvc 2021-12-07 18:37:58 368 0
1 条回答
写回答
取消 提交回答
  • 1、客户端提交应用程序给resourcemanager

    2、resourcemanager为应用分配 spark application master

    3、spark application master 向 resourcemanager 申请资源 container,container可以用于运行executor

    4、resourcemanager 为 spark application master 分配 container

    5、node manager 启动 container

    2021-12-07 18:38:56
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
深度学习+大数据 TensorFlow on Yarn 立即下载
Docker on Yarn 微服务实践 立即下载
深度学习+大数据-TensorFlow on Yarn 立即下载

相关实验场景

更多