开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

什么是数据区分?

什么是数据区分?

展开
收起
云上静思 2021-11-15 18:59:56 733 0
1 条回答
写回答
取消 提交回答
  • 数据分区是指在传统的批处理中对数据 Shuffle 的操作。

    如果把扑克牌想成数据,传统批处理里的 Shuffle 操作就相当于理牌的过程。一般情况下在抓牌过程中,我们都会把牌理顺排列好,相同的数字还要放在一起。这样做最大的好处是,出牌时可以一下子找到想出的牌。Shuffle 是传统的批处理的方式。因为流处理所有的数据都是动态来的,所以理牌的过程或者说处理数据,进行分组或分区的过程,也是在线来完成的。

    2021-11-16 15:10:18
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载