原创 MySQL語句定位性能問題-explain
MySQL語句定位性能問題-explain1.執行計劃2. 執行計劃包含的信息3.一些優化建議參考 1.執行計劃 語法：explain select.... 使用extended可以在原來查詢計劃上提供一些優化的信息 語法:ex
2020-06-21 14:39:53
原创 Hadoop之hive安裝配置
hive安裝配置介紹Hadoop環境mysql環境準備安裝hivehive配置hive-site.xml配置mysql驅動複製環境變量添加啓動hive遇見問題 介紹 hive是在Hadoop中非常重要的角色。hive在1.2.0之
2020-06-21 14:01:11
原创 Hadoop之Hive分區表alter字段類型字段解析沒有改變
Hive分區表alter字段類型字段解析沒有改變問題描述三種方式處理過程 問題描述 今天在創建hive分區表的時候，有一個字段類型創建錯誤，本來應該是string，但是一不小心創建了int類型，然後經過alter修改修改字段類型後
2020-06-21 14:01:11
1
原创 記錄一次Centos斷電系統無法啓動
Centos斷電系統無法啓動環境說明直接處理處理過程 環境說明 centos7，系統環境vmware虛擬機。偶然間主機斷電（虛擬機正在正常運行），系統啓動後進入異常界面 直接處理 此處不廢話，/dev/sda3爲需要修復的分區
2020-06-21 14:01:11
1
原创 Hadoop之Hive完整建表語句
Hive完整建表語句完整建表語句 完整建表語句 CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name -- (Note: TEMPO
2020-06-21 14:01:11
原创 經典排序java實現
經典排序java實現介紹冒泡排序(Bubble Sort)步驟最快最慢實現優化選擇排序步驟實現插入排序步驟實現希爾排序步驟歸併排序（Merge sort）步驟實現快速排序步驟實現堆排序（Heapsort）步驟代碼計數排序實現桶排序
2020-06-16 16:55:09
原创 大數據面試之遇見問題及思考
大數據面試之遇見問題及思考1.hadoop存儲一億數據1.1 添加硬盤，或者數據目錄1.2 添加數據節點1.3 容量監控2.rowkey原則3.hadoop幽靈進程3.java基本操作kafka4.spark讀取數據 1.hado
2020-06-16 03:10:33
原创 Mysql視頻學習總結
Mysql視頻學習總結1.索引優化與分析1.1.索引簡介1.2.性能分析1.2.1.Mysql Query Optimizer1.2.2.Mysql常見的瓶頸：1.2.3.explain1.3.索引優化1.3.1.索引分析1.3.
2020-06-16 03:10:33
1
原创 大數據面試之Spark SQL
大數據面試之Spark SQL1.Spark SQL1.1 Spark SQL連接MySql1.2 Spark讀取Hive數據1.3 DataFrame 和 RDD 之間的轉換？1.4 Spark讀取HBase數據1.5 Spar
2020-06-16 03:10:33
原创 大數據面試之Zookeeper
大數據面試之Zookeeper1.Zookeeper1.1 ZooKeeper介紹1.2 ZAB協議1.3 節點類型1.4 Zookeeper Watcher 機制 -- 數據變更通知1.5 客戶端註冊Watcher實現1.6 服
2020-06-16 03:10:33
原创 大數據面試之Hadoop
大數據面試之Hadoop1.Hadoop1.1 架構模型1.1.1 1.x的版本架構模型1.1.2 2.x的版本架構模型1.2 有哪些角色？每個角色的功能？1.3 Hadoop的shuffle過程1.4 Hadoop調優1.5 c
2020-06-16 03:10:33
原创 大數據面試之Impala
大數據面試之Impala1.Impala1.1 簡介1.2 優勢及特點1.3 Impala架構？如何啓動訪問？1.4 Hive與Impala對比 說明，感謝亮哥長期對我的幫助，此處多篇文章均爲亮哥帶我整理。以及參考諸多博主的文章。
2020-06-16 03:10:33
1
原创 大數據面試之HBase
大數據面試之HBase1.HBase1.1 HBase的架構模型？1.2 HBase讀寫流程1.2.1 寫過程1.2.2 讀過程1.3 HBase查詢速度爲什麼快1.4 Hbase數據熱點的措施1.5 HBase的特點是什麼？1.
2020-06-16 03:10:33
原创 大數據面試之Oozie
大數據面試之Oozie1.Oozie1.1 Oozie介紹 說明，感謝亮哥長期對我的幫助，此處多篇文章均爲亮哥帶我整理。以及參考諸多博主的文章。如果侵權，請及時指出，我會立馬停止該行爲；如有不足之處，還請大佬不吝指教，以期共同進步
2020-06-16 03:10:33
原创 大數據面試之Hive
大數據面試之Hive1.Hive1.1 Hive的架構模型？1.2 Hive配置、啓動和訪問？1.3 hive中存放的是什麼？1.5 Hive建表語句1.6 Hive內部表，外部表的區別1.7 Hive如何導入數據？1.8 Hiv
2020-06-16 03:10:33