- Source : 接收的event数和处理的event数
- Channel : Channel中拥堵的event数
-
Sink : 已经处理的event数
2.3 增加HdfsSink的开关
2.5 增加NullChannel
2.7 修复和scribe的兼容问题
-
HdfsSink中默认的serializer会每写一行在行尾添加一个换行符,我们日志本身带有换行符,这样会导致每条日志后面多一个空行,修改配置不要自动添加换行符;
-
调大MemoryChannel的capacity,尽量利用MemoryChannel快速的处理能力;
-
调大HdfsSink的batchSize,增加吞吐量,减少hdfs的flush次数;
-
适当调大HdfsSink的callTimeout,避免不必要的超时错误;