开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

实时计算 Flink版 sql retract流和lookup维表流union all会是什么情况?

实时计算 Flink版 sql retract流和lookup维表流union all会是什么情况?都会把数据保存下来?

展开
收起
真的很搞笑 2023-10-18 17:24:22 103 0
2 条回答
写回答
取消 提交回答
  • 在Flink的实时计算中,retract流和维表流(lookup)的union all操作具有特定的行为。Retract流是对数据进行更新的操作,类似于传统数据库中的更新或撤回操作。而维表流则是将事实表与维表关联,提供数据关联查询。

    对于retract流和维表流的union all操作,两者的特性会保留。具体来说,retract流中更新的数据会被真实反映到结果集中,而维表流则提供事实表与维表的关联查询。然而,需要注意的是,不是所有的数据都会被保存下来。只有那些满足查询条件并且最终被union all操作合并的数据,才会被实际输出和保存。

    2023-10-21 17:53:19
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在实时计算 Flink版中,当retract流和lookup维表流进行union all操作时,具体的情况如下:

    1. Retract流:Retract流是一种包含插入和撤销操作的流,用于表示有状态计算结果的变化。当Retract流进行union all操作时,会保留所有的插入和撤销记录,以便能够完整地反映计算结果的变化。

    2. Lookup维表流:Lookup维表流是通过连接外部维表来获取额外信息的流。在进行union all操作时,Lookup维表流的数据会直接合并到结果流中,而不会对其进行插入和撤销操作。因为维表数据往往是静态的,并不会随着时间变化。

    综上所述,当retract流和lookup维表流进行union all操作时,Retract流会保留插入和撤销记录,而Lookup维表流会直接合并到结果流中。这样可以确保计算结果的准确性和一致性。

    2023-10-18 18:31:14
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载