[TOC] # 安裝 1. Flume的安裝非常簡單，只需要解壓即可，當然，前提是已有hadoop環境 上傳安裝包到數據源所在節點上 然后解壓 `tar -zxvf apache-flume-1.6.0-bin.tar.gz` 然后進入flume的目錄，修改conf下的`flume-env.sh`，在里面配置JAVA_HOME 2. 根據數據采集的需求配置采集方案，描述在配置文件中(文件名可任意自定義) 3. 指定采集方案配置文件，在相應的節點上啟動flume-ng # 測試下  1. 先在flume的conf目錄下新建一個文件 ~~~ vim netcat-logger.conf ~~~ ~~~ # 定義這個agent中各組件的名字 a1.sources = r1 a1.sinks = k1 a1.channels = c1 # 描述和配置source組件：r1 # netcat類型,可以監控對應端口是否有數據 a1.sources.r1.type = netcat # 綁定到master這臺電腦 a1.sources.r1.bind = master # 監聽的端口,r1就是上面定義的 a1.sources.r1.port = 44444 # 描述和配置sink組件：k1 # 產生的數據顯示到控制臺 a1.sinks.k1.type = logger # 描述和配置channel組件，此處使用是內存緩存的方式 a1.channels.c1.type = memory # 內存容量 a1.channels.c1.capacity = 1000 # 事務容量 a1.channels.c1.transactionCapacity = 100 # 描述和配置source channel sink之間的連接關系 a1.sources.r1.channels = c1 a1.sinks.k1.channel = c1 ~~~ 2. 啟動agent去采集數據 ~~~ flume-ng agent -c conf -f /root/flume/conf/netcat-logger.conf -n a1 -Dflume.root.logger=INFO,console ~~~ ~~~ -c conf 指定flume自身的配置文件所在目錄 -f conf/netcat-logger.conf 指定我們所描述的采集方案 -n a1 指定我們這個agent的名字 ~~~ 3. 測試 先要往agent采集監聽的端口上發送數據，讓agent有數據可采 隨便在一個能跟agent節點聯網的機器上 ~~~ telnet anget-hostname port （telnet master 44444） ~~~