hadoop和hive的客戶端安裝與配置

1  文件列表:

  hadoop_client.tar.gz (hadoop和hive的client環境)

  hadoop_java.tar.gz   (java的環境)

  hadoop_python.tar.gz(python的環境)

2  安裝配置:

>tar xvfz    hadoop_client.tar.gz   /opt/hadoop_client

>tar xvfz    hadoop_java.tar.gz    /opt/java

>tar xvfz    hadoop_python         /opt/python

>mkdir  -p   /pvdata/hadoopdata/tmp/

>groupadd pvlog

>useradd -g pvlog pvlog

>chown -R    /opt/hadoop_client   /opt/java     /pvdata

3 問題列表:

[1]

> hadoop fs -ls /

Bad connection to FS. command aborted.

配置host 指向master

[2]

> hive

> show tables

<!--<property>     
<name>io.compression.codecs</name>     
  <value>org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.DefaultCodec,com.hadoop.compression.lzo.LzoCodec,com.hadoop.compression.lzo.LzopCodec,org.
apache.hadoop.io.compress.BZip2Codec</value>
</property>   
<property>     
    <name>io.compression.codec.lzo.class</name>     
    <value>com.hadoop.compression.lzo.LzoCodec</value>
</property>-->

[3]確認一下hive連接的dbname

<property>
  <name>javax.jdo.option.ConnectionURL</name>
  <value>jdbc:mysql://192.168.95.25:3306/hivedb?createDatabaseIfNotExist=true</value>
  <description>JDBC connect string for a JDBC metastore</description>
</property>

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章