原创 記錄mapreduce寫數據到mysql踩的坑

在reduce階段發生錯誤 Error: java.io.IOException: java.sql.SQLException: No suitable driver found for jdbc:mysql://ldm1:3306/re

原创 Destination Host Unreachable解決方法

在重裝虛擬機碰到的網絡配置問題,以便以後排錯 無論ping什麼都是Destination Host Unreachable 查了下問題,原來是網關沒設置好。設置好後即可正常通網。 至於查看自己設置的網關方法

原创 配置mysql爲其他用戶以及其他機器節點授權

1.linux與linux之間 grant all privileges on *.* to root@'xxxxx' identified by '123456'; flush privileges         grant:授權  

原创 第五章 Hadoop的IO操作

1、數據完整性 檢測數據是否損壞:在數據第一次引入時計算校驗和並在數據通過一個通道進行傳輸時再次計算校驗和(CRC-32) HDFS中,datanode負責在收到數據後存儲該數據及其校驗和之前對數據驗證,客戶端從datanode讀取數據也

原创 第四章 關於yarn

1、YARN應用的運行機制 Step1:客戶端聯繫資源管理器,要求它運行一個application master進程 Step2:資源管理器找到能夠在容器(container)中啓動application master的節點管理器.  

原创 《集體智慧編程》學習筆記-發現組羣篇

1、分級聚類:     通過連續不斷地將最爲相似的羣組兩兩合併,來構造出一個組羣的層次結構。其中每一個組羣都是從單一元素開始的。 分級聚類過程圖     上圖中元素距離越近,它們就越相似。開始時,組羣還只是一個元素。第二步中,A、B已經組

原创 linux筆記--快捷鍵

向上:ctrl+p 向下:ctrl+n 刪除光標前的字符:Backspace/ctrl+h 刪除光標後的字符:ctrl+d 刪除光標前的字符串:ctrl+u 刪除光標後的所有字符串:ctrl+k 移動: 向前:ctrl+b 向後:ctrl

原创 c語言播放背景音樂

相信很多童鞋都在爲大學課設而傷透頭腦,而背景音樂的使用無疑會成爲其中的一個亮點(總比沒有好吧(╯▽╰)),故接下來我將介紹一下如何用C播放音樂。我用的編譯器是CodeBlocks16.01接下來新建一個C文件建立完後是這樣滴然後添加其中m

原创 學習筆記-上傳本地代碼到gitlab

近日開始入坑git,在上傳代碼到gitlab上遇到極大阻礙。故說說自己的解決辦法,方便自己以後不懵逼,也希望給遇到同樣問題的童鞋一點思路。一、首先,肯定是要安裝git滴。可以在官網下載 點擊打開鏈接1.如果是windows下安裝 點這個就