impala 自定義聚合函數不能用java開發，只能用c++開發

 

impala3.0

自定義函數(UDF:USER-DEFINED FUNCTION)有 單行函數（eg: rtrim(),abs(),concat() ,substr()等），可以使用scala、java 、C++開發

 自定義聚合函數（UDAF：USER-DEFINED AGGREGATE FUNCTION）   （eg:sum(),max(),avg() 等 ）,只能用C++開發，暫時不支持scala、java的。

     java語言開發的UDAF 可以在hive上創建使用。

 

IMPALA3.0文檔原文：

To create a persistent scalar C++ UDF with CREATE FUNCTION: (創建scalar、c++開發的自定義函數語法)

CREATE FUNCTION [IF NOT EXISTS]
[db_name.]function_name([arg_type[, arg_type...])
RETURNS return_type
LOCATION 'hdfs_path_to_dot_so'
SYMBOL='symbol_name'

To create a persistent Java UDF with CREATE FUNCTION:(創建java開發的自定義函數的語法)

CREATE FUNCTION [IF NOT EXISTS] [db_name.]function_name
LOCATION 'hdfs_path_to_jar'
SYMBOL='class_name'

To create a persistent UDA, which must be written in C++, issue a CREATE AGGREGATE FUNCTION statement: （必須用C++開發持久化的聚合函數，發佈創建聚合函數的語法）

CREATE [AGGREGATE] FUNCTION [IF NOT EXISTS]
[db_name.]function_name([arg_type[, arg_type...])
RETURNS return_type
LOCATION 'hdfs_path'
[INIT_FN='function]
UPDATE_FN='function
MERGE_FN='function
[PREPARE_FN='function]
[CLOSEFN='function]
[SERIALIZE_FN='function]
[FINALIZE_FN='function]
[INTERMEDIATE type_spec]

工作環境的impala版本2.9.0 -cdh5.12.1

在創建java-udf時 同樣要指定returns ，不指定會報錯。

create function mylower2  (string)  returns  string  location  '/usr/data/hive-udf.jar'  symbol 'com.xxx.hive.lower' 

 

 

以上內容爲工作中積累，不保證完全正確，如有錯誤，請指正，謝謝！