开发者社区> 问答> 正文

怎么提高flink cpu利用率

业务场景,flink batch ,读取大概两个亿数据的文件,然后进行flatmap处理。 flatmap处理出来的数据转换成表,并用sql 对表的数据进行 max(time),min(time),count等处理。 cpu利用率只有140%左右,机器还有很多资源,请问怎么可以提高flink cpu的利用率。*来自志愿者整理的flink邮件归档

展开
收起
毛毛虫雨 2021-12-08 11:24:17 942 0
1 条回答
写回答
取消 提交回答
  • 可以看看是否反压。反压说明并行度还是不够,不反压的话看处理速度是否符合预期。符合预期就不用调了,说明你的任务不复杂,那点cpu占用就够了。如果不符合预期,也没有任何反压,那就是source消费速度太慢。*来自志愿者整理的flink邮件归档

    2021-12-08 16:19:51
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载