开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

有没有大佬遇到过flinkcdc去拉取mongo的数据,有没有知道是有什么原因会导致了呢?

有没有大佬遇到过flinkcdc去拉取mongo的数据,他运行了好几天了,程序也没有报错,突然间就是拉取不到数据了,有没有大佬知道是有什么原因会导致了呢?

展开
收起
真的很搞笑 2023-10-02 08:40:44 88 0
1 条回答
写回答
取消 提交回答
  • 存在即是合理

    常见原因:

    1. MongoDB中的数据发生了变化,导致Flink CDC无法正确解析数据格式或字段类型。
    2. MongoDB的连接出现了问题,例如网络故障或MongoDB服务器崩溃。
    3. Flink CDC的配置有误,例如读取的集合名称、过滤条件等不正确。
    4. Flink集群的资源不足,导致任务运行缓慢或失败。
    5. Flink作业的其他部分存在问题,例如数据处理逻辑错误或资源竞争等。

    建议检查以上可能的原因,并查看Flink日志以获取更多详细信息。

    2023-10-23 14:56:37
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载