发送到kafka提示这个错误 org.apache.kafka.common.KafkaException: Could not add partitions to transaction due to errors: {t-bi-db-etl-flink-cdc-data-assembly-0=CORRUPT_MESSAGE}这个错误怎么在程序里修复?
这是kafka的阿里云版与开源版的区别导致的,阿里云版kafka使用云存储引擎时不支持幂等与事务,当程序里开启事务时就会出现这个问题。可以参考下这位仁兄的情况:https://zhuanlan.zhihu.com/p/630951990
这个错误有点像是是由于Kafka集群中的错误导致的。根据错误消息中提供的信息,这个错误是由于“CORRUPT_MESSAGE”导致的。这意味着在Kafka集群中收到了错误的数据,并且该数据无法被正确接收和处理。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
涵盖 RocketMQ、Kafka、RabbitMQ、MQTT、轻量消息队列(原MNS) 的消息队列产品体系,全系产品 Serverless 化。RocketMQ 一站式学习:https://rocketmq.io/