Apache Paimon统一大数据湖存储底座
Apache Paimon，始于Flink Table Store，发展为独立的Apache顶级项目，专注流式数据湖存储。它提供统一存储底座，支持流、批、OLAP，优化了CDC入湖、流式链路构建和极速OLAP查询。Paimon社区快速增长，集成Flink、Spark等计算引擎，阿里巴巴在内部广泛应用，旨在打造统一湖存储，打通Serverless Flink、MaxCompute等，欢迎大家扫码参与体验阿里云上的 Flink+Paimon 的流批一体服务。
Flink 四大基石之 Checkpoint 使用详解
Flink 的 Checkpoint 机制通过定期插入 Barrier 将数据流切分并进行快照，确保故障时能从最近的 Checkpoint 恢复，保障数据一致性。Checkpoint 分为精确一次和至少一次两种语义，前者确保每个数据仅处理一次，后者允许重复处理但不会丢失数据。此外，Flink 提供多种重启策略，如固定延迟、失败率和无重启策略，以应对不同场景。SavePoint 是手动触发的 Checkpoint，用于作业升级和迁移。Checkpoint 执行流程包括 Barrier 注入、算子状态快照、Barrier 对齐和完成 Checkpoint。
