原创 Mac 安裝Yarn
前言 近期學習ant-design-vue-pro, 需要使用Yarn安裝相關依賴包，以下說說在Mac上安裝Yarn的嘗試 幾種安裝方式 使用homebrew 安裝 brew install yarn 等待許久後，得到如下錯誤，
2020-07-08 10:39:04
2
原创 知識圖譜入門之路-書目推薦
《知識圖譜》趙軍 高等教育出版社 2018-12 《知識圖譜-方法、實踐與應用》王昊奮 漆桂林 陳華鈞 電子工業出版社 2019-08 《知識圖譜-概念與技術》肖仰華 電子工業出版社 2019
2020-06-29 15:35:54
原创 CDH 6.3.1 設置郵件告警功能【2020年06月】
操作步驟 1.登錄cloudera manager頁面，進入cloudera manager service服務 2.單擊配置，在搜索框輸入alert,檢索相關配置項 3.設置郵箱等相關參數 這個端口折騰了很久，祝你好運🍀
2020-06-29 15:35:51
2
原创 CDH 6.3Unable to instantiate SparkSession with Hive support because Hive classes are not found.解決辦法
系統環境 CentOS 7.7.1908 CDH 6.3.1 問題現象 執行spark-submit，具體命令如下： spark-submit --class xxx --master yarn --deploy-mode cl
2020-06-29 15:35:51
14
原创 CDH 6.3.1 sql-client踩坑紀
系統環境 CentOS 7.7.1908 CDH 6.3.1 FLINK1.9.0 目標 其實就一個樸素的想法：利用sql-client運行一個hello world 排錯過程 [root@slave02 flink]# ./bi
2020-06-13 10:58:09
4
原创 Canal-adapter1.1.14 最新版本安裝的過程中出現的NullPointerException異常
系統環境 CentOS Linux release 7.7.1908 Canal 1.1.14 問題現象 2020-06-08 13:39:48.019 [Thread-2] ERROR c.a.o.canal.adapter.l
2020-06-13 10:58:09
原创 Hue 創建Hbase 表 出現Api 錯誤：HTTPConnectionPool(host= port=9090): Read timed out.
系統環境 CDH 6.3.1 Hue 4.4.0 錯誤現象 Hue 創建hbase 表，遇到如下錯誤： hue server log: [06/Jun/2020 13:54:46 +0800] access INFO
2020-06-13 10:58:09
17
原创 CDH 6.3.1 hue 4.4 Api 錯誤：500 Server Error: Server Error for url: http://x.x.x.x:9090
系統環境 CDH 6.3.1 Hue 4.4.0 問題現象 Hue中無法連接hbase表 問題排查 hue server 日誌：http://xxxx:8888/hue/logs [05/Jun/2020 19:32:19 -0
2020-06-13 10:58:09
原创 Hive on Spark Error while processing statement: FAILED: Execution Error, return code 30041
系統環境 CDH 6.3.1 Hive 2.1.1 Spark 2.4.0-cdh6.3.1 具體問題 Hue上執行查詢語句： SELECT count(1) from dop_test1.t_bill_reg_info hi
2020-06-02 21:11:19
原创 Run Hive on spark tasks with Hue, always running more than 30 min
環境 CDH 6.3.1 Hive 2.1.1（執行引擎Spark） Hue Spark 2.4.0 問題 Hue執行hive sql: 理論上14.005s已經執行完了，結果已經正常返回，但是hue上的job 持續了30m才結
2020-06-02 21:11:19
原创 Dolphin scheduler Druid 連接失敗問題解決
Dolphin scheduler Druid 連接失敗問題解決 問題現象 搭建了dolphinscheduler分佈式服務，整體web系統除調度任務外運行正常，無法配置工作流，發現master日誌中顯示，通過druid連接mys
2020-05-22 06:46:11
原创 word2vec 獲得當前的所有詞向量表的幾種方式
前提條件 1. 安裝gensim包 2. 已經生成詞向量模型 在實際項目中，需要構建詞和詞向量字典表用於訓練，以下是我所用到的方式 方式1: from gensim.models.word2vec import
2019-05-01 01:05:40
原创 Tensorflow 錯誤ValueError
Tensorflow 錯誤ValueError: Variable already exists, disallowed. Did you mean to set reuse=True or reuse=tf.AUTO_REUSE
2019-04-11 05:24:44
原创 Prometheus 初識
近期因需要添加一些hbase監控，等公司運維同事的排期等不及，遂擼起袖子自己幹；調研了一些開源監控工具，最終選擇Prometheus。 Prometheus安裝 wget https://github.com/prometheus
2018-09-03 12:43:06