Logstash的使用

現在有一個“用戶畫像”的項目;前期需要搭建一個ElasticSearch的集羣用來存儲用戶的行爲數據;在搭建好ES的集羣后,導入數據到ES是一個問題,採用的是Logstash進行數據導入;現將Logstash使用過程中碰到的問題記錄如下:

1. 剛剛接觸Logstash,對各個參數都不熟悉,需要多次試驗。但是最後發現,指定一個文件後,Logstash只讀取一次,如果需要讀取多次需要添加參數sincedb_path => "/dev/null" 。

2. 導入到 elastic search 中的數據的index和type是可以指定的,如果不指定,ES會根據時間生成一個index名。指定方法爲添加兩個參數 index => "xxx" 、document_type => "xxx"。

Logstash的詳細配置方法參見:https://kibana.logstash.es/content/logstash/plugins/output/elasticsearch.html


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章