mq 的消息 过来需要 join 业务方的数据(mysql table) ,是不是将 #Flink
mq 的消息 过来需要 join 业务方的数据(mysql table) ,是不是将 mq 的消息作为一个streaming ,过来了一条数据就去 jdbc 查询 mysql 的数据,还是 他会将 mq 作为 一个流,mysql 的数据也作为一个流,进行双流 进行join,这种应该是tempolar join ,blink 的temporal join 使用lookup 方式,这种会不有性能影响? #Flink
展开
收起
1
条回答
写回答
写回答
-
双流JOIN依赖的是FLINK本身的状态,lookup方式类似于map join直接查,可以通过缓存和异步的方式优化; 本身Flink状态可以用内存可以用rocksDB本身的QPS本身会好一点,但是本身状态维护,超时的管理运维成本是比较高的,对流及时性也是也有很多挑战;选择哪一种还是要看自己的业务需求
2020-05-19 14:37:07赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
