日志收集系统 flume

实时数据

  1. 高容错误
  2. 高可用
  3. 可发货
什么是flume?

Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。

flume 优点作用

  1. 日志收集
  2. 不同数据源
  3. 转存不同存储中心
  4. 负载均衡,故障转移

flume 架构图

日志收集系统 flume
配置
日志收集系统 flume