开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

XTransfer的业务需求是什么?

已解决

XTransfer的业务需求是什么?

展开
收起
游客lmkkns5ck6auu 2022-08-31 10:32:01 293 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    在业务发展早期,XTransfer选择了传统的离线数仓架构,采用全量采集、批量处理、覆盖写入的数据集成方式,数据时效性较差。随着业务的发展,离线数仓越来越不能满足对数据时效性的要求,XTransfer决定从离线数仓向实时数仓进行演进。而建设实时数仓的关键点在于变更数据采集工具和实时计算引擎的选择。

    经过了一系列的调研,在 2021 年 2 月份,XTransfer关注到了 Flink CDC 项目,Flink CDC 内嵌了 Debezium, 使 Flink 本身具有了变更数据捕获的能力,很大程度上降低了开发门槛,简化了部署复杂度。加上 Flink 强大的实时计算能力和丰富的外部系统接入能力,成为了XTransfer构建实时数仓的关键工具。

    以上内容摘自《Apache Flink 案例集(2022版)》电子书,点击https://developer.aliyun.com/ebook/download/7718 可下载完整版

    2022-08-31 12:14:06
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

相关电子书

更多
PolarDB-X 集中分布式一体化,为业务的快速成长护航 立即下载
无惧挑战: 一站式构建轻运维高可用架构 立即下载
无惧挑战-一站式构建轻运维高可用架构 立即下载