原创 CentOS6.4安裝MySQL5.7.12

推薦好文章:http://blog.csdn.net/liyf155/article/details/61419623

原创 Sqoop --m(--num-mappers)參數使用及優化

 Sqoop並行化是啓多個map task實現的,-m(或--num-mappers)參數指定map task數,默認是四個。當指定爲1時,可以不用設置split-by參數,不指定num-mappers時,默認爲4,當不指定或者num-m

原创 Python Linux上安裝MYSQLdb

1、下載MySQL-python-1.2.3b1.tar.gz 解壓:tar  -zxvf  MySQL-python-1.2.3b1.tar.gz 2、使用python setup.py build編譯: Python setup.p

原创 win10 wifi密碼修改

打開“網絡和Internet設置” 選擇“WLAN” 選擇“管理已知網絡” 點擊需要修改的網絡 點擊“忘記” 找到wifi圖標,點擊後找到你要連接的網絡,重新連接即可

原创 HBase1.2.3架構剖析(七)之 MOB

HBase1.2.3架構剖析(七)之 MOB-http://www.genshuixue.com/i-cxy/p/15467126

原创 cloudera manager識別parcel校驗文件.sha文件不正確會導致parcel識別不了的問題

有時會出現在更多選項裏面無論怎麼配置,parcel文件始終無法識別,推測原因可能是sha校驗文件不正確導致的。 解決辦法:重新生成一個sha文件 執行:sha1sum CDH-6.3.1-1.cdh6.3.1.p0.1470567-el

原创 Centos7.5安裝mysql5.7.28rpm包報錯:postfix-2.10.1-6.el7.x86_64需要:libmysqlclien

執行: [root@public mysql]# yum localinstall mysql-community-common-5.7.28-1.el7.x86_64.rpm mysql-community-libs-5.7.28-1

原创 sqoop 從oracle到hive數據錯位,併產生很多null值,clob類型被截取成一小段一小段

1、在執行Sqoop從oracle和mysql導數到hive中時,出現hive數據錯位,併產生很多null值: 原因是源數據中包含許多'\n'、'\r'、'\01'等字符,表在分割字段和行過程中出現錯位; 解決方式:在Sqoop執行中增

原创 cloudera安裝過程報錯:Your password does not satisfy the current policy requirements

安裝cm的時候執行創建數據庫:sudo sh  /usr/share/cmf/schema/scm_prepare_database.sh mysql -uroot -p scm scm scm,報錯:Your password doe

原创 安裝CDH組件的時候會多產生一個分組的原因

安裝CDH組件的時候會多產生一個角色分組的原因: Cloudera Manager 將具有相同配置值的Hadoop角色分組到“角色組”。如果您看到每個角色類型有多個組(即,DataNode默認組和DataNode組1),則可能是因爲集羣

原创 CDH5.11.0安裝啓動hive過程org.apache.hadoop.hive.metastore.HiveMetaException: Failed to load driver

解決文章:http://blog.csdn.net/brotherdong90/article/details/4966173 1,通過Cloudera Manager添加Hive服務,在啓動Hive的時候遇到錯誤: .org.apa

原创 Redhat6.5-Python2.7及插件安裝 # 1.修改環境變量 #echo '****** 1.修改PATH環境變量增加jdk1.7.0_65路徑 *******' #echo ' # #

Redhat6.5-Python2.7及插件安裝   # 1.修改環境變量 #echo '****** 1.修改PATH環境變量增加jdk1.7.0_65路徑 *******' #echo ' # #export PATH=/JAVA/

原创 CDH5.11.0安裝過程報錯:Unable to verify database connection

CDH5.11.0安裝過程報錯:Unable to verify database connection 問題原因是沒有安裝mysql-compat-libs包 rpm -ivh mysql-community-libs-compa

原创 Cannot create directory /tmp. Name node is in safe mode

CDH啓動到HDFS時報錯: 頁面報錯:正在創建 HDFS /tmp 目錄  命令 (1354) 已失敗 日誌詳細信息: PriviledgedActionException as:hdfs (auth:SIMPLE) caus

原创 CDH5.X完全卸載步驟

  CDH5.X完全卸載步驟——http://blog.csdn.net/wulantian/article/details/42706777 點贊 收藏 分享 文章舉報