课程购买咨询和资料获取请加老师QQ  2020363447

Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力 。Flume提供了从console（控制台）、RPC（Thrift-RPC）、text（文件）、tail（UNIX tail）、syslog（syslog日志系统），支持TCP和UDP等2种模式，exec（命令执行）等数据源上收集数据的能力。

Flume优势
1.可以高速采集数据，采集的数据能够以想要的文件格式及压缩方式存储在hdfs上
2..事务功能保证了数据在采集的过程中数据不丢失
3.部分Source保证了Flume挂了以后重启依旧能够继续在上一次采集点采集数据，真正做到数据零丢失

Flume的组成
1.source(源端数据采集)：Flume提供了各种各样的Source、同时还提供了自定义的Source
2.Channel(临时存储聚合数据)：主要用的是memory channel和File channel（生产最常用），生产中channel的数据一定是要监控的，防止sink挂了，撑爆channel
3.Sink（移动数据到目标端）：如HDFS、KAFKA、DB以及自定义的sink

通过理论和剖析原理的方式让你熟悉Flume技术，节省你的学习时间和提高你的学习效率。