开发者社区> 问答> 正文

在key 分布不均匀的无统计场景里,数据倾斜的现象如何解决?

已解决

在key 分布不均匀的无统计场景里,数据倾斜的现象如何解决?

展开
收起
詹姆斯邦德00 2022-10-17 11:33:40 339 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    问题说明:key分布不均匀的无统计场景,例如上游数据分布不均匀,使用keyBy来打散数据。

    解决思路:通过添加随机前缀,打散 key 的分布,使得数据不会集中在几个Subtask。

    以上内容摘自《企业级云原生白皮书项目实战》电子书,点击https://developer.aliyun.com/ebook/download/7774可下载完整版

    2022-10-17 19:37:39
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
阿里云开发者社区官方技术圈,用户产品功能发布、用户反馈收集等。
问答排行榜
最热
最新

相关电子书

更多
热点Key的发现与解决之道 立即下载
图计算优化技术探索 立即下载
低代码开发师(初级)实战教程 立即下载