原创 CDH集羣中部署Presto
Presto是完全基於內存的並行計算以及分佈式SQL交互式查詢引擎。它可以共享Hive的元數據，然後直接訪問HDFS中的數據。同Impala一樣，作爲Hadoop之上的SQL交互式查詢引擎，通常比Hive要快5-10倍。Pr
2020-07-04 01:27:04
10
原创 IntelliJ IDEA設置背景爲護眼色（護眼綠）
1、“File”-->“Settings”-->“Editor”-->“Color Scheme”-->“General”-->“Text”-->“Default text” 2、點擊“Background”後面的顏色選擇器，在顏色選擇器
2020-06-20 00:12:09
原创 Linux卸載源碼/二進制包安裝的MySQL
1、首先需要檢查MySQL的狀態 systemctl status mysqld 2、關閉MySQL服務並設置開機不自啓 systemctl stop mysqld systemctl disable mysqld 3、搜索相關配
2020-06-20 00:12:09
原创 【Flume】Unable to load source type: org.keedio.flume.source.SQLSource
【問題描述】 今天在CDH集羣中使用Flume的時候發生瞭如下的錯誤： 2020-04-10 10:42:07,281 (conf-file-poller-0) [ERROR - org.apache.flume.node
2020-06-20 00:12:08
1
原创 Oracle中的with as語法
with as語句是一個子查詢，使用它可以增強sql的可讀性，當查詢中多次用到某一部分時，可以使用該語句創建一個公共的臨時表並將結果存儲在用戶臨時表空間中，可以多次引用避免了重複解析，從而增強了性能，執行效率會提高不少。臨時
2020-06-19 18:12:05
原创 Python繪製新冠肺炎疫情圖
寫在前面的話 在《詩經·秦風》中有一篇叫做《無衣》的詩歌，其中這樣寫道：豈曰無衣？與子同袍，與子同仇！豈曰無衣？與子同澤，與子偕作！豈曰無衣？與子同裳，與子偕行！這句話的意思就是：誰說沒有衣裳？和你穿同樣的戰袍，和你同仇敵愾
2020-06-19 18:12:05
原创 【Hue】Unexpected error. Unable to verify database connection.
【問題描述】 在配置CDH集羣時，Hue測試連接數據庫報瞭如下的錯誤： 【問題原因】 查看CDH服務節點的日誌信息，發現如下錯誤： [02/Apr/2020 08:29:30 +0000] setting
2020-06-19 16:25:01
1
原创 Could not open client transport with JDBC Uri: jdbc:hive2://cdh-master:10000/default: null
【問題描述】 今天爲了在本地使用pyhive連接調用Hive中的數據，在配置文件中添加了如下的配置： 於是，問題來了，小編本地所有使用hiveserver2連接的軟件，比如：dbeaver、kettle等都統統
2020-06-19 16:25:01
原创 【Hue】CM6.3.1 啓動HUE Load Balancer角色失敗。
【問題描述】 今天啓動Hue的UI界面時，發生瞭如下的報錯： Load Balancer角色失敗 【問題原因】 這是因爲服務器環境沒有預先安裝httpd，mod_ssl服務導致的。 【解決辦法】 yum -
2020-06-19 16:25:00
1
原创 【Hive】NoViableAltException(309@[213:1: tableName : (db= identifier DOT tab= identifier -> ^( ......
【問題描述】 今天在Hive中建表時發生瞭如下的錯誤： NoViableAltException(309@[213:1: tableName : (db= identifier DOT tab= identifier ->
2020-06-19 16:25:00
6
原创 【Hue】Could not start SASL: Error in sasl_client_start (-4) SASL(-4): no mechanism available
【問題描述】 今天在打開Hue的UI界面時發生瞭如下報錯： Could not start SASL: Error in sasl_client_start (-4) SASL(-4): no mechanism avai
2020-06-19 16:25:00
2
原创 【Hue警告】必須在 HBase 服務中配置 Thrift Server 角色以使用 Hue HBase Browser 應用程序。
【問題描述】 今天在打開Hue的UI界面時，報瞭如下的警告： 必須在 HBase 服務中配置 Thrift Server 角色以使用 Hue HBase Browser 應用程序。 【解決辦法】 解決辦法就是
2020-06-19 16:25:00
1
原创 【pyhive】本地使用pyhive連接hive數據庫踩的坑
OK，本文來看看本地在PyCharm中使用pyhive連接hive數據庫時踩過的坑吧，先看看一眼小編的測試代碼~ 首先是封裝了一個連接hive獲取數據的類，因爲是測試，所以寫的簡單了些，如下： ''' @Fi
2020-06-16 11:50:03
2
原创 使用StreamSets將MySQL中變化的數據實時的導入到HBase中
在之前的博客中，小編介紹瞭如何在CDH中安裝StreamSets，文章鏈接爲：《CDH6.3.1中安裝StreamSets3.16.0》。透過這個文章名稱也能夠看出來小編使用的CDH版本以及安裝的StreamSets的版本了
2020-06-16 11:50:03
2
原创 【StreamSets】 JDBC_502 - Batch size greater than maximal batch size allowed in sdc.properties
【問題描述】 今天在CDH集羣中使用StreamSets的時候報瞭如下的錯誤： JDBC_502 - Batch size greater than maximal batch size allowed in sdc.p
2020-06-16 11:50:03
10