开发者社区> 问答> 正文

HDFS 在 Flink 作业中面临哪些压力?

HDFS 在 Flink 作业中面临哪些压力?

展开
收起
夹心789 2024-07-30 16:37:29 34 0
1 条回答
写回答
取消 提交回答
  • HDFS 在 Flink 作业中面临的压力主要来源于两个方面:一是随着业务增长导致的正常负载增加;二是大作业部署和 Checkpoint 期间带来的瞬时 RPC 请求高峰,可能导致 NameNode 的 RPC Call Queue 打满,影响其他作业的读写性能。

    2024-07-30 19:40:27
    赞同 2 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
海量数据分布式存储——Apache HDFS之最新进展 立即下载