开发者社区> 问答> 正文

Flink中的Window出现了数据倾斜有什么解决办法?

Flink中的Window出现了数据倾斜有什么解决办法?

展开
收起
游客qzzytmszf3zhq 2021-12-07 19:50:32 297 0
1 条回答
写回答
取消 提交回答
  • window产生数据倾斜指的是数据在不同的窗口内堆积的数据量相差过多。本质上产生这种情况的原因是数据源头发送的数据量速度不同导致的。出现这种情况一般通过两种方式来解决:

    在数据进入窗口前做预聚合

    重新设计窗口聚合的key

    2021-12-07 19:50:46
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载