今天在應用別人提供的新安裝的hadoop集羣環境時,創建Hive表成功卻不能添加數據,不添加任何數據也不能查詢。在網上找到這個帖子:
http://blog.csdn.net/chenyi8888/article/details/7165519 正好解決了我的問題,在此分享。
最近在使用hive的時候,metadata我是放在mysql(是5.5的版本)裏的。
當時mysql設置的字符集是utf8,
正常創建表的時候,一切正常,當我進行創建分區表後,在使用的時候,就出現以下錯誤信息:
FAILED: Error in metadata: javax.jdo.JDODataStoreException: Error(s) were found while auto-creating/validating the datastore for classes. The errors are printed in the log, and are attached to this exception.
NestedThrowables:
com.mysql.jdbc.exceptions.MySQLSyntaxErrorException: Specified key was too long; max key length is 1000 bytes
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask
以上錯誤,主要是在select操作、drop操作時,就會出錯。
這裏提醒下,創建分區表,需要執行alter table 表名 add PARTITION(stat_date='2011-06-08', province='ZheJiang')這樣的SQL語句。
然後才能導入數據。不然就有如下報錯信息:
FAILED: Error in semantic analysis: Line 3:10 Partition not found ''2011-12-30''
轉回主題來,解決的方案:
是將mysql的數據庫字符集設置成latin1,就行了(網上有很多修改字符集的操作,這裏就不詳細說了)。
修改數據庫的字符集
mysql>use mydb
mysql>alter database mydb character set latin1;