开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们 请问一下mongo source 的并行度没法调整吗??

3264问.png

展开
收起
游客3oewgrzrf6o5c 2022-08-18 10:39:14 300 0
1 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    MongoDB作为Flink的数据源,可以使用Flink官方提供的MongoDB Connector来实现数据的读取。对于MongoDB Connector中的并行度问题,可以进行如下解释:

    MongoDB Connector的并行度由Flink的并行度决定:在Flink中,每个任务并行执行的并发度由并行度参数决定。对于MongoDB Connector而言,它作为一个Flink的数据源,其并行度也受到任务的并行度参数影响。

    MongoDB Connector的并行度可以通过Flink的并行度参数进行调整:在Flink中,可以通过指定任务的并行度参数,来调整MongoDB Connector的并行度。例如,在使用Flink SQL读取MongoDB数据源时,可以通过在SQL语句中指定并行度参数,“WITH ( 'connector' = 'mongodb', 'hosts' = 'localhost', 'database' = 'test', 'collection' = 'collection', 'parallelism' = '4')”,来控制MongoDB Connector的并行度。

    2023-06-18 08:05:20
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
Data as a Service - 数据即服务 -- MongoDB⾼级应⽤模式 立即下载
Phoenix 全局索引原理与实践 立即下载
从理论到实践,深度解析MySQL Group Replication 立即下载