开发者社区> 问答> 正文

flink sql 支持checkpoints吗?

使用flink sql进行实时计算(部署模式是on yarn)。想用到checkpoint,在flink-conf.yaml配置了:

state.backend: filesystem
state.checkpoints.dir: hdfs:///flink/flink-checkpoints
state.savepoints.dir: hdfs:///flink/flink-savepoints
state.checkpoints.num-retained: 10

现在有两个问题:
1.checkpoint在hdfs只在初始的时候生成了一个文件夹
2.使用savepoint无法记录数据状态:
如:简单的wordcount无法记录累加值。

想请问大神sqlclient的checkpoints是不是没有像代码那些完全开放。如果想实现这个功能是不是要进行二次开发。感谢

展开
收起
游客izljdlkgbdwfc 2019-07-10 17:46:37 129957 1
8 条回答
写回答
取消 提交回答
  • 精于基础,广于工具,熟于业务。
    推荐回答

    是支持的,你说的很对。要自己二次开发

    2019-09-11 10:28:31
    赞同 展开评论 打赏
  • 推荐回答:

    可以参考:Flink SQL开发指南

    官方帮助文档地址:阿里云帮助中心

    更多参考: 阿里云官方(新用户需官网注册查看)

    2021-11-30 19:35:41
    赞同 展开评论 打赏
  • 支持的,要二次开发

    2020-03-29 22:01:04
    赞同 展开评论 打赏
  • 支持的,要开发

    2020-03-22 08:33:42
    赞同 展开评论 打赏
  • 技术架构师 阿里云开发者社区技术专家博主 CSDN签约专栏技术博主 掘金签约技术博主 云安全联盟专家 众多开源代码库Commiter

    对的,虽然支持,但是还需要二次定制

    2020-01-04 21:40:28
    赞同 展开评论 打赏
  • 关于flink更多学习

    2019-12-10 10:05:21
    赞同 展开评论 打赏
  • 可以参考:Flink SQL开发指南

    2019-09-17 12:42:37
    赞同 3 展开评论 打赏
  • 看了下源码。checkpoint这部分确实对sql client支持的不是很好。需要手工改代码啦~

    2019-07-17 23:38:14
    赞同 展开评论 打赏
滑动查看更多
问答排行榜
最热
最新

相关电子书

更多
SQL Server在电子商务中的应用与实践 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载