CDH| Hive| Hue| Sqoop| Impala等組件安裝部署

 

 

一. 添加Hive服務

將 Hive 服務添加到 Cluster 1

配置hive元數據

測試通過後繼續

自動啓動Hive進程

修改Hive配置

/opt/cloudera/parcels/HADOOP_LZO-0.4.15-1.gplextras.p0.123/lib/hadoop/lib

 

更新Hive Metastore NameNode(先停止Hive)

 

 

 

 

二. Oozie安裝

  添加Oozie服務,選擇有MySQL的節點安裝

 

 

 

選擇集羣節點

 

 

三. Hue

1. Hue概述

1)Hue來源

HUE=Hadoop User Experience(Hadoop用戶體驗),直白來說就一個開源的Apache Hadoop UI系統,由Cloudera Desktop演化而來,最後Cloudera公司將其貢獻給Apache基金會的Hadoop社區,它是基於Python Web框架Django實現的。通過使用HUE我們可以在瀏覽器端的Web控制檯上與Hadoop集羣進行交互來分析處理數據。

2)Hue官網及使用者

官網網站:http://gethue.com/

2.   安裝前的準備

1)在LoadBalancer節點安裝mod_ssl

2)查看/usr/lib64/mysql下有沒有libmysqlclient_r.so.16,如果沒有,上傳libmysqlclient_r.so.16到/usr/lib64/mysql,並軟鏈接到/usr/lib64/

[root@hadoop101 lib]# yum -y install mod_ssl
已加載插件:fastestmirror, refresh-packagekit, security
設置安裝進程
Loading mirror speeds from cached hostfile
 * base: mirrors.aliyun.com
 * extras: mirrors.huaweicloud.com
 * updates: mirrors.huaweicloud.com
解決依賴關係
--> 執行事務檢查
---> Package mod_ssl.x86_64 1:2.2.15-69.el6.centos will be 安裝
..........



[root@hadoop102 mysql]# ll
總用量 3108
lrwxrwxrwx. 1 root root      26 1月  15 2019 libmysqlclient_r.so.16 -> libmysqlclient_r.so.16.0.0
-rwxr-xr-x. 1 root root 1595432 5月  11 2016 libmysqlclient_r.so.16.0.0
lrwxrwxrwx. 1 root root      24 1月  15 2019 libmysqlclient.so.16 -> libmysqlclient.so.16.0.0
-rwxr-xr-x. 1 root root 1584904 5月  11 2016 libmysqlclient.so.16.0.0
[root@hadoop102 mysql]# scp /usr/lib64/mysql/libmysqlclient_r.so.16 root@hadoop101:/usr/lib64/mysql/
libmysqlclient_r.so.16 
[root@hadoop101 lib64]# ln -s /usr/lib64/mysql/libmysqlclient_r.so.16 /usr/lib64/libmysqlclient_r.so.16

 

 添加HUE服務

 

 

 

HUE頁面

http://hadoop101:8888(未優化)或http://hadoop101:8889(優化)

第一次開啓HUE會出現以下頁面,此時輸入的用戶名和密碼可以隨意,之後登錄頁面以第一次輸入的賬號密碼爲依據。例如,用戶名admin 密碼admin

 

 

 

四. Sqoop安裝

1)添加服務

選擇Sqoop

 

目前選擇sqoop1即可

2)選擇節點

 

 安裝在Hadoop101機器上:

數倉之即席查詢數倉搭建

Impala安裝

   添加服務

 

注意:最好將StateStoreCataLog Sever單獨部署在同一節點上。

啓動Impala

 

 

打開Hue

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章