flink-cdc-connector可以做到mysql数据结构动态演进吗?mysql新增了一个字段,cdc同步任务不用重启就能读到新增字段的数据吗?
是的,flink-cdc-connector可以支持MySQL数据结构的动态演进,即MySQL数据库表结构如新增字段等变更,不需要重启CDC任务就可以读到变更后的最新数据结构。
这是因为flink-cdc-connector是通过读取MySQL的binlog日志来实现数据同步的。
社区版的sql目前不行,你可以使用ds代码来手动处理,可以在启动的时候加上ddl变更语句,阿里的ctas 和 cdas是可以的。此回答整理至钉群“Flink CDC 社区”。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。