开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问,docker安装三台flink,那三台服务器能实现资源调度吗?

请问,docker安装三台flink,那三台服务器能实现资源调度吗?

展开
收起
游客6vdkhpqtie2h2 2022-09-14 11:14:37 949 0
1 条回答
写回答
取消 提交回答
  • 是的,可以在三台服务器上分别安装Docker,并在每个Docker容器中部署Flink集群。然后,可以通过Flink自带的ResourceManager和JobManager来实现Flink集群的资源调度和任务分发。

    具体来说,可以在三台服务器上启动三个Docker容器,每个容器中运行一个Flink集群的ResourceManager和一个JobManager。然后,可以在其中一个Flink集群的JobManager上提交作业,ResourceManager将会为该作业分配资源,并将任务分发到其他Flink集群中的JobManager执行。

    需要注意的是,需要在所有Flink集群中使用相同的配置文件,并在ResourceManager和JobManager之间配置正确的网络连接。另外,当作业在不同的Flink集群中执行时,可能需要考虑数据的跨集群传输和网络带宽等问题。

    2023-04-24 11:43:24
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    应用 Docker 进行持续交付:用技术改变交付路程 立即下载
    从Docker到容器服务 立即下载
    构建基因数据应用生态系统—— docker in Bio/informatics 立即下载