开发者社区> 问答> 正文

使用 Iceberg 作为中间层存储时,遇到了哪些新的挑战?

使用 Iceberg 作为中间层存储时,遇到了哪些新的挑战?

展开
收起
萝卜丝丸子 2024-08-13 20:45:05 13 0
1 条回答
写回答
取消 提交回答
  • 使用 Iceberg 作为中间层存储时,遇到的主要挑战是 Flink 写入 Iceberg 表时数据的可见性依赖于 Checkpoint 的 Commit 操作,导致数据延迟较高。因为 Checkpoint 是阻塞式操作,不建议设置过小的周期,这使得 Iceberg 数据的延迟比 Kafka 高,不适合对时延要求高的场景。image.png

    2024-08-13 21:49:23
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载