如何给Apache Pig自定义UDF函数

发布网友 发布时间：2022-05-06 09:06

我来回答

共2个回答

热心网友 时间：2022-05-06 10:36

Counters: 
Total records written : 4  
Total bytes written : 64  
Spillable Memory Manager spill count : 0  
Total bags proactively spilled: 0  
Total records proactively spilled: 0  
 
Job DAG: 
job_1419419533357_0147 
 
 
2014-12-30 18:10:24,394 [main] INFO  org.apache.pig.backend.hadoop.executionengine.mapReceLayer.MapReceLauncher - Success!  
2014-12-30 18:10:24,395 [main] INFO  org.apache.hadoop.conf.Configuration.deprecation - fs.default.name is deprecated. Instead, use fs.defaultFS  
2014-12-30 18:10:24,396 [main] INFO  org.apache.pig.data.SchemaTupleBackend - Key [pig.schematuple] was not set... will not generate code.  
2014-12-30 18:10:24,405 [main] INFO  org.apache.hadoop.maprece.lib.input.FileInputFormat - Total input paths to process : 1  
2014-12-30 18:10:24,405 [main] INFO  org.apache.pig.backend.hadoop.executionengine.util.MapRedUtil - Total input paths to process : 1  
(ZHANG SAN,12)  
(SONG,34)  
(LONG,34)  
(ABC,12)

热心网友 时间：2022-05-06 11:54

Hive进行UDF开发十分简单，此处所说UDF为Temporary的function，所以需要hive版本在0.4.0以上才可以。 Hive的UDF开发只需要重构UDF类的evaluate函数即可。