开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink这个按量付费 Prometheus 监控服务不能不开吗?怎么使用自建的Prometheus

Flink这个按量付费 Prometheus 监控服务不能不开吗?怎么使用自建的Prometheus

展开
收起
三分钟热度的鱼 2023-11-08 18:43:55 66 0
4 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在阿里云上使用 Flink 实例时,您可以选择是否使用 Prometheus 监控服务。如果您想使用自建的 Prometheus 监控服务,可以通过以下步骤进行配置:

    1. 登录阿里云控制台,进入 Flink 实例页面。
    2. 在实例详情页,点击左侧菜单栏中的“安全组”选项卡。
    3. 查看 Prometheus 监控服务的安全组规则,确保 Prometheus 监控服务可以访问 Flink 实例的端口 6379 和 9379。
    4. 将您的 Prometheus 服务器的 IP 地址添加到安全组规则中,允许 Prometheus 监控服务访问 Flink 实例的端口。
    5. 将 Prometheus 配置文件中的地址指向 Flink 实例的公网 IP 地址和端口号。
    6. 开启 Prometheus 的 scrape job,开始收集 Flink 实例的监控数据。
    2023-11-10 14:20:12
    赞同 展开评论 打赏
  • Apache Flink的按量付费Prometheus监控服务是Flink的一部分,主要用于监控Flink的任务运行状态和资源使用情况。如果你不需要这个服务,你可以在启动Flink任务时,通过配置参数来关闭它。

    以下是一个基本的步骤:

    1. 在你的Flink任务配置文件中,找到job.execution.failure-detector.enabled这个参数,并将其设置为false

    2. 然后,重新启动你的Flink任务,新的配置就会生效。

    如果你已经有了自己的Prometheus监控系统,并且希望使用它来监控Flink的任务,你可以按照以下步骤操作:

    1. 在你的Flink任务配置文件中,找到metrics.reporter.prom.class这个参数,并将其设置为org.apache.flink.metrics.prometheus.PrometheusReporter

    2. 在你的Flink任务配置文件中,找到metrics.reporter.prom.factory.class这个参数,并将其设置为org.apache.flink.metrics.prometheus.PrometheusMetricRepositoryFactory

    3. 在你的Flink任务配置文件中,找到metrics.reporter.prom.port这个参数,并将其设置为你的Prometheus监控系统的监听端口。

    4. 在你的Flink任务配置文件中,找到metrics.reporter.prom.host这个参数,并将其设置为你的Prometheus监控系统的监听地址。

    5. 然后,重新启动你的Flink任务,新的配置就会生效。

    2023-11-09 15:51:52
    赞同 展开评论 打赏
  • 关闭阿里云 Flink 自带的 Prometheus 监控服务并改用自建的 Prometheus,可以采取如下步骤:

    1. 关闭自带监控:将集群管理界面中的“监控配置”部分设为禁用。

    2. 配置自建 Prometheus:通过 pushgateway 连接到 Flink 实例,采集相关指标。请确保你的 Prometheus 版本与 Flink 版本兼容,并查阅相关文档以了解如何将 Prometheus 与 Flink 集成。

    2023-11-08 21:39:38
    赞同 展开评论 打赏
  • 支持上报到其他渠道的,您参考下文档哈:https://help.aliyun.com/zh/flink/user-guide/report-metrics-to-other-systems 此回答整理自钉群“实时计算Flink产品交流群”

    2023-11-08 19:16:25
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载