开发者社区> 问答> 正文

Flume的工作机制是什么?

Flume的工作机制是什么?

展开
收起
芯在这 2021-12-10 23:04:41 277 0
1 条回答
写回答
取消 提交回答
  • 核心概念是agent,里面包括source,channel和sink三个组件。

    Source运行在日志收集节点进行日志采集,之后临时存储在channel中,sink负责将channel中的数据发送到目的地。

    只有发送成功channel中的数据才会被删除。

    首先书写flume配置文件,定义agent、source、channel和sink然后将其组装,执行flume-ng命令。

    2021-12-10 23:04:58
    赞同 展开评论 打赏
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
零基础实现Flume收集网站日志数据到MaxCompute 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
任庆盛|Flink CDC + Kafka 加速业务实时化 立即下载

相关实验场景

更多