Flume 常用配置

Flume

  • 配置文件文件名任意
a1.sources = r1
a1.sinks = k1
a1.channels = c1

其中

a1 是agent 的名字
r1 是sources 的名字
c1 是channels的名字
k1 是sinks的名字

這些名字都是任意起的
接下來的配置是sources

a1.sources.r1.type = netcat
a1.sources.r1.bind = localhost
a1.sources.r1.port = 44444

agent a1 的 sources r1 的類型爲 netcat
bind :綁定的地址爲 localhost
port :綁定的端口爲 44444

sinks配置

a1.sinks.k1.type = logger

agent a1 的sinks k1 的類型爲 logger

channels配置
有兩種:內存/文件

a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100

agent a1 的channels c1 的類型爲 memory(內存)
capacity (可放event數量) 1000
transactionCapacity(每次存取event的數量) 100

綁定sinks sources到channels

a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
發佈了118 篇原創文章 · 獲贊 10 · 訪問量 7萬+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章