使用flink sql进行实时计算(部署模式是on yarn)。想用到checkpoint,在flink-conf.yaml配置了:
state.backend: filesystem
state.checkpoints.dir: hdfs:///flink/flink-checkpoints
state.savepoints.dir: hdfs:///flink/flink-savepoints
state.checkpoints.num-retained: 10
现在有两个问题:
1.checkpoint在hdfs只在初始的时候生成了一个文件夹
2.使用savepoint无法记录数据状态:
如:简单的wordcount无法记录累加值。
想请问大神sqlclient的checkpoints是不是没有像代码那些完全开放。如果想实现这个功能是不是要进行二次开发。感谢
对的,虽然支持,但是还需要二次定制
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。