CDP7.0.x趟坑之旅

文章目的

CDP DC7.0.3是Cloudera與Hortonworks合併後,第一個融合CDH和HDP所有組件的on-premise版本,CDP Data Center主要由Cloudera Runtime構成,Cloudera Runtime由超過35個開源項目組成,當然CDP Data Center還包括其它功能如管理功能Cloudera Manager,Key Management,專業支持等。 說直白一點就是CDH與HDP的結合體(目前處在內測版本,不適用生產)

基礎環境配置

與之前CDH6.X沒什麼區別

注意,各節點的root賬戶密碼需要保持一致 ,無需自己安裝JDK

CM安裝

依然與CDH6沒什麼區別

CDH安裝

本次爲web頁面傻瓜式安裝,因此我在安裝的時候並沒有安裝JDK,而是在傻瓜式操作中選中自帶的cloudera JDK也不多說了

我只是想說一下我遇到一些列坑

坑1:1.hive server2 無法啓動

原因 jar包衝突導致 slf4j-log4j12-1.7.25.jar與log4j-slf4j-impl-2.10.0.jar jar包衝突
解決方式: 在hive server2 所在節點的//opt/cloudera/parcels/CDH-7.0.3-1.cdh7.0.3.p0.1635019/jars/目錄下,將log4j-slf4j-impl-2.10.0.jar給屏蔽掉
爲什麼不屏蔽另外一個jarn呢?另外一個JAR後續的HBase 還會用到的

坑2:ranger Ranger Tagsync 無法啓動問題

我不知道是我手賤勾中了這個選項還是系統默認就勾中了
解決方式:ranger.service.https.attrib.ssl.enabled 配置設置爲false,反正去掉這個就可以啓動
(個人感覺ranger的坑特別多,不建議安裝,還是使用sentry吧)

3.impala 啓動時報空指針問題(impala與ranger集成問題)

上面說了,ranger問題
解決方式:在impala服務範圍中將ranger選項設置爲false

4.hue web頁面無hive查詢

莫名其妙的就沒了,好像要在DAS裏查詢,but,DAS需要hive on tez,我配置的是hive on spark
暫未解決

5.Atlas web頁面無法登陸問題

暫未解決

6.hue與hbase集成問題

這個之前的CDH6就有,我寫過的,可以自己去看一下

內測版本還會有更多的坑等着我們的

參考

  • https://blog.csdn.net/Hadoop_SC/article/details/103328839
  • https://blog.csdn.net/TXBSW/article/details/84648269
  • https://docs.cloudera.com/cdpdc/7.0/index.html
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章