原创 Secondary NameNode和Standby NameNde的區別
Secondary NameNode： HDFS單NameNode節點的情況下（即非高可用HA），Secondary NameNode負責每隔一段時間將舊的fsimage文件和edits log文件merge成新的fsimage並替換，即
2021-03-22 21:43:45
原创 RDD轉換算子和行動算子的區別
textFile 既不是transformation 也不是 action 它是爲生成RDD前做準備 算子： 指的就是RDD上的方法。 spark中的算子分爲2類： (1)轉換算子： transformation： 由RRD 調用方法 返回
2021-02-22 09:32:24
原创 討論Spark中RDD四種轉換聚合算子的區別（源碼角度）
首先，讓我們先思考一個問題：reduceByKey、foldByKey、aggregateByKey、combineByKey的區別？ 解釋： 1.reduceByKey: 相同key的第一個數據不進行任何計算，分區內和分區間計算規則相同
2021-02-22 09:32:23
1
原创 VUE、JS判斷當前是早上，中午，下午還是晚上
用情景 模板中調用 {{getTimeState()}} 代碼 getTimeState(){ // 獲取當前時間 let timeNow = new Date(); // 獲取當前小時 let hou
2021-02-11 21:32:44
原创 IDEA安裝完插件Scala後 通過add framework support...找到不到插件解決方法
如下圖 添加時發現找不到 解決方法： 首先project structure 中刪除已經存在 現點擊如下 在按照下圖這樣 找到存在的 選中 點擊移除 ----》應用 ----》ok 在從新到add framework support…
2021-02-06 21:34:49
1