Hive安裝部署-內置derby版以及缺陷&mysql版安裝

Hive安裝部署

Hive安裝前需要安裝好JDK和Hadoop。配置好環境變量。
根據元數據存儲的介質不同，分爲下面兩個版本，其中derby屬於內嵌模式。實際生產環境中則使用mysql來進行元數據的存儲。
內置derby版：
解壓hive安裝包
bin/hive啓動即可使用
缺點：不同路徑啓動hive，每一個hive擁有一套自己的元數據，無法共享

hive命令如下，與mysql類似：

show databases;
create database itcast;
use itcast;
show tables;
create table t_test(id int);
show tables;
select * from t_test;

多了這兩個文件：
derby.log：數據庫日誌
metastore_db：元數據數據庫

cd到hive的bin目錄，啓動hive，就只有default數據庫了，之前創建的itcast這個庫沒有了。

cd bin/
ll
./hive
show databases;

CTRL+C結束。在當前目錄下又新生成了derby.log和metastore_db。
說明不同路徑啓動hive，每一個hive擁有一套自己的元數據，無法共享。
一般用於測試實驗。

mysql版：
解壓、修改配置文件
vi conf/hive-site.xml
配置Mysql元數據庫信息

hive安裝手冊

1. 上傳tar包
   hive安裝包：apache-hive-1.2.1-bin.tar.gz
   上傳到服務器
2. 解壓
   tar -zxvf apache-hive-1.2.1-bin.tar.gz
   可以重命名
   mv apache-hive-1.2.1-bin hive
   安裝包目錄結構如下圖所示：
   
3. 安裝mysql數據庫
   推薦yum 在線安裝
4. 配置hive
   （a）配置HIVE_HOME環境變量
   vi conf/hive-env.sh
   配置其中的$hadoop_home
   
   命令：which hadoop
   複製如下路徑，不用全路徑：
   
   配置如下hadoop環境變量：
   
   （b）配置元數據信息
   vi hive-site.xml
   添加如下內容：

<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
<description>JDBC connect string for a JDBC metastore</description>
</property>

<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>Driver class name for a JDBC metastore</description>
</property>

<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
<description>username to use against metastore database</description>
</property>

<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
<description>password to use against metastore database</description>
</property>
</configuration>

所有默認的配置文件，都放在hive-default.xml中，用戶自定義配置，都放在hive-site.xml中
5. 安裝hive和mysql完成後，將mysql的連接jar包拷貝到$HIVE_HOME/lib目錄下，安裝mysql驅動：mysql-connector-java-5.1.32.jar
如果出現沒有權限的問題，在mysql授權（在安裝mysql的機器上執行）

命令：mysql -uroot -p
#（執行下面的語句 *.*：所有庫下的所有表 %：任何IP地址或主機都可以連接）
命令：GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;
命令：FLUSH PRIVILEGES;

6. Jline包版本不一致的問題，需要拷貝hive的lib目錄中jline.2.12.jar的jar包替換掉hadoop中的/home/hadoop/app/hadoop-2.6.4/share/hadoop/yarn/lib/jline-0.9.94.jar

啓動hive
bin/hive

yum在線安裝mysql

命令：yum install mysql mysql-server mysql-devel

完成後，用如下命名啓動mysql
命令：/etc/init.d/mysqld start

啓動mysql控制檯：

mysql回車，進入mysql交互頁面
mysql>USE mysql;
mysql>UPDATE user SET Password=PASSWORD('newpassword') WHERE user='root'; 首次登陸，修改newpassword密碼
mysql>FLUSH PRIVILEGES; 刷新權限
mysql -u root -p
Enter Password:<your new password>
mysql>GRANT ALL PRIVILEGES ON *.* TO '用戶名'@'%' IDENTIFIED BY '密碼' WITH GRANT OPTION; 授權遠程連接命令，修改用戶名和密碼。
完成後就能遠程管理mysql了。
mysql>FLUSH PRIVILEGES; 如果不放心，還可以再授權一下權限。

mysql服務名字 service mysqld start

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '密碼' WITH GRANT OPTION; 授權遠程連接命令

service mysqld status可以查看到已經安裝好了，正在運行
chkconfig mysqld on 設置後續開機啓動
chkconfig mysqld --list