原创 oozie 4.1 的郵箱功能，不支持 smtps
做個筆記， 今天在在oozie配置郵箱支持郵箱的告警的時候，由於提供的smtps協議(一般是465端口)的郵箱服務器，在clouder manager配置後，故意跑一個失敗的任務然後發郵件告警，發現告警失敗，根據報錯日誌，找到源碼
2020-06-16 14:05:52
原创 cdh版hue+oozie調度，workflow之shell腳本執行以及日誌查看
1、首先準備兩個腳本 test1.sh #!/bin/sh echo "param1=$1" test2.sh #!/bin/bash sh ./test1.sh $1 sh test1.sh 2018-11-20 執行結果爲：
2018-11-21 23:31:45
13
原创 cdh版hue+oozie調度，部署後時區的修改
1. hue修改時區 時區修改爲: Asia/Chongqing 2. oozie修改時區 值爲： oozie.processing.timezone GMT+0800 不過oozie修改這個參數之後，有個坑爹地方，那就是不能通過
2018-11-14 12:18:53
11
原创 【筆記】Spark Streaming's Kafka libraries not found in class path 處理
pyspark開發中，sparkStream與kafak整合，經常出現以下報錯 原因： 缺少spark-streaming-kafka-0-8-assembly_2.11-2.2.0.jar包 解決方式如下： linux中，上傳以下
2018-09-01 05:59:48
13
原创 impala 創建kudu表報錯
錯誤日誌： the impalad startup flag -kudu_master_hosts is not used 錯誤原因： kudu安裝成功之後，沒有將kudu作爲impala的服務範圍，修改地址如下圖，
2018-09-01 05:59:48
1