原创 flink on yarn 踩過的坑

flink on yarn (不錯的blog):https://www.jianshu.com/p/1b05202c4fb6 啓動 ./yarn-session.sh 1.報錯: Error: A JNI error has o

原创 redis6.0.4 make遇到的問題

**問題:**我安裝的是redis-6.0.4版本 解決方法:gcc版本過低問題;查看當前gcc版本 gcc -v gcc -v # 升級gcc到5.3及以上,如下: # 升級到gcc 9.3 `` yum -y install

原创 flume上傳hdfs遇到的問題

1.數據沒有上傳到hdfs 日誌報:Hadoop “Unable to load native-hadoop library for your platform” warning 在hadoop-env.sh: export HA

原创 belk學習

beats elk架構圖: Filebeat負責從web服務器上實時抓取數據,當log文件發生變化時,將文件內容吐給kafka。 Kafka是消息隊列,主要作用是在filebeat和logstash之間做緩存,避免因寫入logs

原创 logstash流程圖

原创 elk架構圖

原创 filebeat架構圖

原创 python詞雲報OSError: cannot open resource

File "C:\Users\WarmDay\AppData\Local\Programs\Python\Python36\lib\site-packages\PIL\ImageFont.py", line 188, in _

原创 CDH安裝Oozie及oozie學習遇到的問題

CDH修改Oozie數據庫類型爲mysql 1.將mysql驅動存放到/var/lib/oozie目錄下 2.創建oozie數據庫 3.初始化數據庫 workflow.xml文件配置mapreduce遇到的問題: 1 .ja