开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

在Flink CDC中mongodb cdc拉不到数据,如何解决?

在Flink CDC中mongodb cdc拉不到数据,如何解决?WARN o.a.f.c.base.source.reader.fetcher.SplitFetcherManager - Failed to close the source reader in 30000 ms. There are still 1 split fetchers running
WARN c.v.c.c.b.s.reader.external.IncrementalSourceStreamFetcher - Failed to close the stream fetcher in 30 seconds.

展开
收起
花开富贵111 2024-07-15 15:54:03 96 0
1 条回答
写回答
取消 提交回答
  • 检查MongoDB连接配置是否正确,包括URL、用户名、密码、数据库名和集合名。
    确认MongoDB实例运行正常,无网络延迟或访问权限问题。
    查看Flink作业的配置,特别是并行度设置,可能需要适当调整以适应MongoDB实例的负载。
    检查MongoDB CDC的相关日志,找出错误原因。
    确认是否已开启MongoDB的Oplog,并且Flink CDC能够访问。
    可参见实时计算 Flink版 CDC问题

    2024-07-15 16:14:16
    赞同 6 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    开源数据库 MongoDB 专场 MongoDB疑难杂症分析及优化 立即下载
    MongoDB多数据中心的方案选型之路 立即下载
    饿了么高级架构师陈东明:MongoDB是如何逐步提高可靠性的 立即下载