flink任务里面能用本地缓存吗(比如把数据存在HashMap里)?我把分库分表的表关系(如user0~user1000写到user表)缓存在HashMap里,把任务提交到集群环境后,HashMap打印出来发现是空的;在本地运行时是有值的
可以,使用的是堆内存,尽量不要用,这个应该不是写死的吧,是不是集群环境和数据源没有ping 通,弄个redis,也可以实现,你存在hashmap中的那个value,未必就存在于那个Task所在的TM所在的节点内存里,本地运行有值是因为你是用的本地模式,相当于只有一个节点,我也怀疑是这个原因,准备用redis,此回答整理自钉群“Flink CDC 社区”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。