开发者社区> 问答> 正文

spark的yarn集群模式Driver运行在什么上?

spark的yarn集群模式Driver运行在什么上?

展开
收起
游客nxq6attzvywgk 2021-12-06 21:10:38 835 0
1 条回答
写回答
取消 提交回答
  • spark的yarn集群模式Driver运行在Application Master上,Application Master进程同时负责驱动我们的代码程序和从ResourceManager申请资源。由于它直接运行在yarn的Container当中,所以并不需要客户端,客户端可以在提交完毕之后就关闭,

    2021-12-06 21:11:09
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
深度学习+大数据 TensorFlow on Yarn 立即下载
Docker on Yarn 微服务实践 立即下载
深度学习+大数据-TensorFlow on Yarn 立即下载

相关实验场景

更多