hive使用tez环境配置

Tez引擎包下载:

https://mirrors.tuna.tsinghua.edu.cn/apache/tez/0.8.4/apache-tez-0.8.4-bin.tar.gz

1:将下载的安装包解压

$ pwd

/opt/ubd/core

$tar -zxvf apache-tez-0.8.4-bin.tar.gz

重命令tez 文件夹

$mv apache-tez-0.8.4-bin tez

2:将tez上传到hdfs目录下,并修改tez配置

hdfs dfs -mkdir /tez/

hdfs dfs -put tez/share/tez-0.8.4.tar.gz /tez/

修改本地tez文件

vi  tez/conf/tez-site.xml

3:配置环境变量,并复制tez-site.xml到hadoop和hive的配置下

export TEZ_CONF_DIR=/opt/tez/conf
export TEZ_HOME=/opt/tez
export TEZ_JARS=/usr/local/tez/client
export HADOOP_CLASSPATH=${TEZ_CONF_DIR}:${TEZ_JARS}/*:${TEZ_JARS}/lib/*:`hadoop classpath`

4:登陆hive测试tez引擎

hive (default)> set hive.execution.engine=tez;

然后跑一段sql,如果成功就可以了

5:可能的问题

有可能碰到kyro的问题,将kyro的包放到tez家目录的lib下

还有记得查看自己 的环境变量是否准确

如果还继续报,就把这个jar包 改bak 一下

 

 

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章