サーチ…
ハイブUDFの作成
UDFを作成するには、UDF( org.apache.hadoop.hive.ql.exec.UDF
)クラスを拡張し、評価メソッドを実装する必要があります。
UDFが準拠し、JARがビルドされたら、一時的/永続的な関数を作成するために、hiveコンテキストにjarを追加する必要があります。
import org.apache.hadoop.hive.ql.exec.UDF;
class UDFExample extends UDF {
public String evaluate(String input) {
return new String("Hello " + input);
}
}
hive> ADD JAR <JAR NAME>.jar;
hive> CREATE TEMPORARY FUNCTION helloworld as 'package.name.UDFExample';
hive> select helloworld(name) from test;
指定された文字列をトリミングするハイブUDF。
package MyHiveUDFs;
import org.apache.commons.lang.StringUtils;
import org.apache.hadoop.hive.ql.exec.UDF;
import org.apache.hadoop.io.Text;
public class Strip extends UDF {
private Text result = new Text();
public Text evaluate(Text str) {
if(str == null) {
return null;
}
result.set(StringUtils.strip(str.toString()));
return result;
}
}
上記をjarファイルにエクスポートする
Hive CLIに移動し、UDF JARを追加する
hive> ADD jar /home/cloudera/Hive/hive_udf_trim.jar;
JARがハイブCLIクラスパスにあることを確認する
hive> list jars;
/home/cloudera/Hive/hive_udf_trim.jar
一時関数を作成する
hive> CREATE TEMPORARY FUNCTION STRIP AS 'MyHiveUDFs.Strip';
UDF出力
hive> select strip(' hiveUDF ') from dummy;
OK
hiveUDF
Modified text is an extract of the original Stack Overflow Documentation
ライセンスを受けた CC BY-SA 3.0
所属していない Stack Overflow