本节书摘来自华章出版社《Flume日志收集与MapReduce模式》一书中的第1章,第1.6节,作者 [美] 史蒂夫·霍夫曼(Steve Hoffman)斯里纳特·佩雷拉(Srinath Perera),更多章节内容可以访问云栖社区“华章计算机”公众号查看
1.6 小结
本章介绍了Flume尝试解决的问题,如何以一种易于配置且可靠的方式将数据加载进Hadoop集群中以进行数据处理。本章还介绍了Flume代理及其逻辑组件,包括事件、源、通道选择器、通道、接收处理器和接收器。
下一章将会更加详细地介绍这些主题,特别是每个组件最为常用的实现。就像其他优秀的开源项目一样,几乎所有这些组件都是可扩展的,如果它们无法满足你的需求,那么你可以自行对其进行扩展。