原创 CDH集羣間數據同步 distcp
首先要確定兩個集羣的namenode（活動），可以登錄cm-集羣-hdfs-實例查看，確定namenode後再確定相應端口，可以在cm中hdfs主機-資源界面查看（一般爲8020），確定完兩個集羣的參數後再確定下面的配置 1、兩個集羣的所
2020-07-03 03:18:27
原创 cloudera cm 版本升級
由於安裝cm時版本不對，導致安裝cdh出現報錯end(0) cloudera-manager-agent must have Version=5.15.0 and Build=62, exiting closing logging fi
2020-07-03 03:18:27
原创 hadoop任務無法提交
cm 中 yarn 資源配置中創建了新的放置計劃後刪除，發現hadoop任務提交後一直pending狀態，必須重新創建一個放置計劃
2020-05-14 19:01:55
原创 hive 連接報錯 return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
hive庫對應權限不足，hdfs dfs -chmod 修改權限後可以使用
2020-05-07 21:14:34
原创 利用phpMyadmin 將數據導入MySQL
手頭上的數據都是excel， 嘗試了一下將數據導入服務器的MySQL。 首先是數據的處理，將excel數據導出爲csv格式， 並用notepad或其他工具將其編碼格式改爲utf8. 之後利用phpMyAdmin 導入 字符集選擇 uf
2018-08-28 03:21:52
原创 AMD ryzen fedora26 安裝Nvidia驅動
下載Nvidia驅動 關閉Nouveau： 1)把驅動加入黑名單中: /etc/modprobe.d/blacklist.conf 在後面加入： blacklist nouveau 2) 使用 dracut重新建立 initra
2018-08-28 03:21:52
2
原创 MySQL 輸入中文數據
MySQL 輸入中文數據 首先查看數據表的信息： SHOW CREATE TABLE ‘tablename’; 查看所需輸入中文的列的編碼方式以及表的編碼方式 利用ALTER TABLE ‘tablename’ CHANGE ‘c
2018-08-28 03:21:51