impala 自定义聚合函数不能用java开发，只能用c++开发

 

impala3.0

自定义函数(UDF:USER-DEFINED FUNCTION)有 单行函数（eg: rtrim(),abs(),concat() ,substr()等），可以使用scala、java 、C++开发

 自定义聚合函数（UDAF：USER-DEFINED AGGREGATE FUNCTION）   （eg:sum(),max(),avg() 等 ）,只能用C++开发，暂时不支持scala、java的。

     java语言开发的UDAF 可以在hive上创建使用。

 

IMPALA3.0文档原文：

To create a persistent scalar C++ UDF with CREATE FUNCTION: (创建scalar、c++开发的自定义函数语法)

CREATE FUNCTION [IF NOT EXISTS]
[db_name.]function_name([arg_type[, arg_type...])
RETURNS return_type
LOCATION 'hdfs_path_to_dot_so'
SYMBOL='symbol_name'

To create a persistent Java UDF with CREATE FUNCTION:(创建java开发的自定义函数的语法)

CREATE FUNCTION [IF NOT EXISTS] [db_name.]function_name
LOCATION 'hdfs_path_to_jar'
SYMBOL='class_name'

To create a persistent UDA, which must be written in C++, issue a CREATE AGGREGATE FUNCTION statement: （必须用C++开发持久化的聚合函数，发布创建聚合函数的语法）

CREATE [AGGREGATE] FUNCTION [IF NOT EXISTS]
[db_name.]function_name([arg_type[, arg_type...])
RETURNS return_type
LOCATION 'hdfs_path'
[INIT_FN='function]
UPDATE_FN='function
MERGE_FN='function
[PREPARE_FN='function]
[CLOSEFN='function]
[SERIALIZE_FN='function]
[FINALIZE_FN='function]
[INTERMEDIATE type_spec]

工作环境的impala版本2.9.0 -cdh5.12.1

在创建java-udf时 同样要指定returns ，不指定会报错。

create function mylower2  (string)  returns  string  location  '/usr/data/hive-udf.jar'  symbol 'com.xxx.hive.lower' 

 

 

以上内容为工作中积累，不保证完全正确，如有错误，请指正，谢谢！