开发者社区> 问答> 正文

flink-shaded-hadoop-2-uber版本如何选择

xxx-xxx 分别表示什么意思?*来自志愿者整理的flink邮件归档

展开
收起
又出bug了-- 2021-12-02 11:49:59 2359 0
1 条回答
写回答
取消 提交回答
  • 以flink-shaded-hadoop-2-uber的2.8.3-10.0为例 

    2.8.3指的hadoop的版本,10.0指定的flink-shaded[1]的版本 

    社区从1.10开始不再推荐使用flink-shaded-hadoop的方式,而且通过设置HADOOP_CLASSPATH环境变量来提交[2], 

    这样可以让Flink变得hadoop free,从而同时支持hadoop2和hadoop3 

    如果你还坚持使用flink-shaded-hadoop,那就建议使用最新的版本就可以了2.8.3-10.0 

    [1]. https://github.com/apache/flink-shaded 

    [2]. 

    https://ci.apache.org/projects/flink/flink-docs-master/deployment/resource-providers/yarn.html#preparation*来自志愿者整理的FLINK邮件归档

    2021-12-02 14:35:34
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
《构建Hadoop生态批流一体的实时数仓》 立即下载
零基础实现hadoop 迁移 MaxCompute 之 数据 立即下载
CIO 指南:如何在SAP软件架构中使用Hadoop 立即下载