天天看點

Flume之——配置案例

監聽telnet 44444端口

之後在指令行輸入telnet 192.168.175.100 44444指令,連接配接成功後,輸入資料,會在Flume指令行列印出來。

基于記憶體的Channel

基于檔案的Channel

基于目錄的Channel

配置Flume監聽某個目錄,當目錄中有新檔案建立時,Flume将檔案寫入Channel,之後會在檔案名後加一個字尾.COMPLETED,同時,配置中會利用正規表達式忽略對臨時檔案的監聽。

Flume寫資料到HDFS

Flume寫資料到Kafka

啟動Flume指令如下: