Flume - 安裝

一、安裝

1 解壓縮

[root@hadoop01 ~]# tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local/

2 修改名稱

[root@hadoop01 local]# mv apache-flume-1.9.0-bin/ flume-1.9.0/

3 修改配置

[root@hadoop01 flume-1.9.0]# cd conf/
[root@hadoop01 conf]# cd flume-env.sh.template flume-env.sh

[root@hadoop01 conf]# vi flume-env.sh
添加內容如下：
export JAVA_HOME=/usr/local/jdk1.8.0_221

4 添加環境變量

[root@hadoop01 conf]# vi /etc/profile
添加內容如下：
export FLUMN_HOME=/usr/local/flume-1.9.0
export PATH=$PATH:$FLUMN_HOME/bin

5 測試

1、創建myjob目錄
[root@hadoop01 flume-1.9.0]# mkdir -p myjob

2、創建job文件
[root@hadoop01 flume-1.9.0]# cd myjob
[root@hadoop01 myjob]# vi first.job
文件內容如下：
#定義source|channel|sink組件
a1.sources = r1
a1.sinks = k1
a1.channels = c1

#配置r1的屬性
a1.sources.r1.type = exec
a1.sources.r1.command = tail -F /root/f_log

#配置sinks的屬性
a1.sinks.k1.type = logger

#配置channel的屬性
a1.channels.c1.type = memory
a1.channels.c1.capacity = 10000
a1.channels.c1.transactionCapacity = 10000

#綁定source與sink於channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1

3、新開窗口2創建f_log文件
[root@hadoop01 ~]# vi /root/f_log
編輯內容如下：
Hello World!

4、返回窗口1運行啓動語句
[root@hadoop01 flume-1.9.0]# flume-ng agent -c conf/  -f myjob/first.job -n a1 -Dflume.root.logger=INFO,console

5、返回窗口2向f_log文件追加內容
[root@hadoop01 ~]# echo "Love You" >> f_log 

6、返回窗口1查看打印的日誌數據內容