Flume简介

flume概念:
apache Flume 是一个从可以收集例如日志,事件等数据资源,并将这些数量庞大的数据从各项数据资源中集中起来存储的工具/服务,或者数集中机制。flume具有高可用,分布式,配置工具,其设计的原理也是基于将数据流,如日志数据从各种网站服务器上汇集起来存储到HDFS,HBase等集中存储器中。

作用:
主要用来采集数据
Flume简介
flume架构:
Flume简介
source:
数据源
channel:
数据传输通道
sink:
从channel收集数据
event:传输单元
flume数据传输的基本单元,以事件的形式将数据送往目的地