E-MapReduce的Yarn集群如何配置热更新
已解决E-MapReduce的Yarn集群如何配置热更新
写回答
-
官方回答可以通过以下三种方式：
1、开启关键配置。可以在EMR控制台YARN服务的配置页签，检查或者配置以下参数。yarn.scheduler.configuration.store.class 使用的后备存储的类型。例如，设置为fs，表示使用FileSystem类型存储。 yarn.scheduler.configuration.max.version 保留历史版本的最大数量，超出自动清理。yarn.scheduler.configuration.fs.path capacity-scheduler.xml文件存储路径。不存在存储路径时，则自动创建。不指定前缀时，则默认defaultFs的相对路径。
2、查看capacity-scheduler.xml配置。
○ 方式一（REST API）：http:///ws/v1/cluster/scheduler-conf。 ○ 方式二（HDFS文件）：${yarn.scheduler.configuration.fs.path}/capacity-scheduler.xml.，其中后缀值最大的文件是最新的配置文件。3、更新配置。示例：更新一个配置项yarn.scheduler.capacity.maximum-am-resource-percent，并删除配置项yarn.scheduler.capacity.xxx，删除某配置项只需去掉其Value值。curl -X PUT -H "Content-type: application/json" 'http:///ws/v1/cluster/scheduler-conf' -d ' { "global-updates": [ { "entry": [{ "key":"yarn.scheduler.capacity.maximum-am-resource-percent", "value":"0.2" },{ "key":"yarn.scheduler.capacity.xxx" }] } ] }'
2022-12-12 11:44:44赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
