Hive的常見屬性配置和其他命令

Hive的一些常見配置有，比如：更改數據倉庫位置，在shell中顯示數據庫名，執行查詢時顯示字段名等

一、Hive中的常見的其他命令

$ bin/hive -help可以查看hive的命令以及解釋

1、“-e” 不進入hive窗口就可以執行sql

$ bin/hive -e "select id from student;"

2、“-f”執行腳本中sql語句

執行文件中的sql語句並將結果寫入文件中

$ bin/hive -f /opt/module/datas/hivef.sql  > /opt/module/datas/hive_result.txt

3．退出hive窗口：

hive(default)>exit;

hive(default)>quit;

在新版的hive中沒區別了，在以前的版本是有的：

exit:先隱性提交數據，再退出；

quit:不提交數據，退出；

4．在hive cli命令窗口中如何查看hdfs文件系統

hive(default)>dfs -ls /;

5．在hive cli命令窗口中如何查看本地文件系統

hive(default)>! ls /opt/module/datas;

二、Hive的常見配置

1   Hive數據倉庫位置配置

       1）Default數據倉庫的最原始位置是在hdfs上的：/user/hive/warehouse路徑下。

       2）在倉庫目錄下，沒有對默認的數據庫default創建文件夾。如果某張表屬於default數據庫，直接在數據倉庫目錄下創建一個文件夾。

       3）修改default數據倉庫原始位置（將hive-default.xml.template如下配置信息拷貝到hive-site.xml文件中）。

<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive/warehouse</value>
<description>location of default database for the warehouse</description>
</property>

     配置同組用戶有執行權限

     bin/hdfs dfs -chmod g+w /user/hive/warehouse

2  查詢後信息顯示配置

  1）在hive-site.xml文件中添加如下配置信息，就可以實現顯示當前數據庫，以及查詢表的頭信息配置。

<property>
	<name>hive.cli.print.header</name>
	<value>true</value>
</property>

<property>
	<name>hive.cli.print.current.db</name>
	<value>true</value>
</property>

2）重新啓動hive，對比配置前後差異。

3 ★Hive運行日誌信息配置

1)．Hive的log默認存放在/tmp/atguigu/hive.log目錄下（當前用戶名下）

2)．修改hive的log存放日誌到/opt/module/hive/logs

       a、修改/opt/module/hive/conf/hive-log4j.properties.template文件名稱爲  hive-log4j.properties

       b、在hive-log4j.properties文件中修改log存放位置    hive.log.dir=/opt/module/hive/logs

 

4 、參數配置方式注意

1．查看當前所有的配置信息

hive>set;

2．參數的配置三種方式

       （1）配置文件方式

默認配置文件：hive-default.xml

用戶自定義配置文件：hive-site.xml

       注意：用戶自定義配置會覆蓋默認配置。另外，Hive也會讀入Hadoop的配置，因爲Hive是作爲Hadoop的客戶端啓動的，Hive的配置會覆蓋Hadoop的配置。配置文件的設定對本機啓動的所有Hive進程都有效。

（2）命令行參數方式

啓動Hive時，可以在命令行添加-hiveconf param=value來設定參數。

例如：

$ bin/hive -hiveconf mapred.reduce.tasks=10;

注意：僅對本次hive啓動有效

查看參數設置：

hive (default)> set mapred.reduce.tasks;

（3）參數聲明方式

可以在HQL中使用SET關鍵字設定參數

例如：

hive (default)> set mapred.reduce.tasks=100;

注意：僅對本次hive啓動有效。

查看參數設置

hive (default)> set mapred.reduce.tasks;

上述三種設定方式的優先級依次遞增。即配置文件<命令行參數<參數聲明。注意某些系統級的參數，例如log4j相關的設定，必須用前兩種方式設定，因爲那些參數的讀取在會話建立以前已經完成了。