UDF：用户定义（普通）函数，只对单行数值产生作用； 继承UDF类，添加方法 evaluate() UDAF：用户定义聚合函数，可对多行数据产生作用；与SQL中常用的SUM()，AVG()等也是聚合函数； 聚合函数使用： UDAF实现有简单与通用两种方式： a. 简单UDAF因为使用Java反射导致 ...
分类：
其他好文 时间：
2017-07-05 09:52:47
阅读次数：
133
UDF函数开发 标准函数（UDF）：以一行数据中的一列或者多列数据作为参数然后返回解雇欧式一个值的函数，同样也可以返回一个复杂的对象，例如array，map，struct。 聚合函数(UDAF)：接受从零行到多行的零个到多个列，然后返回单一值。例如sum函数。 生成函数（UDTF）:接受零个或者多个 ...
分类：
其他好文 时间：
2017-03-28 10:44:28
阅读次数：
217
Maximum 然后通过mvn打包。 add JAR /home/cloudera/Desktop/myudf-0.0.3-SNAPSHOT.jar; CREATE TEMPORARY FUNCTION my_max2 AS 'udf.hive.myudf.Maximum'; hive> selec ...
分类：
其他好文 时间：
2017-01-09 00:28:55
阅读次数：
170
ObjectInspector是Hive中一个咋一看比较令人困惑的概念，当初读Hive源代码时，花了很长时间才理解。当读懂之后，发现ObjectInspector作用相当大，它解耦了数据使用和数据格式，从而提高了代码的复用程度。简单的说，ObjectInspector接口使得Hive可以不拘泥于一种特定数据格式，..
分类：
其他好文 时间：
2016-11-25 14:27:09
阅读次数：
269
1.自定义UDF 2.UDAF 3.介绍AbstractGenericUDAFResolver 4.介绍GenericUDAFEvaluator 5. ...
分类：
其他好文 时间：
2016-11-19 02:55:15
阅读次数：
182
说明 这篇文章是来自Hadoop Hive UDAF Tutorial - Extending Hive with Aggregation Functions：的不严格翻译，因为翻译的文章示例写得比较通俗易懂，此外，我把自己对于Hive的UDAF理解穿插到文章里面。 udfa是hive中用户自定义的 ...
分类：
其他好文 时间：
2016-10-10 23:46:40
阅读次数：
377
?虽然Hive提供了很多函数，但是有些还是难以满足我们的需求。因此Hive提供了自定义函数开发 ?自定义函数包括三种UDF、UADF、UDTF ?UDF(User-Defined-Function) ?UDAF（User- Defined Aggregation Funcation） ?UDTF(U ...
分类：
其他好文 时间：
2016-04-17 11:39:55
阅读次数：
216
Hive自定义函数包括三种UDF、UDAF、UDTF UDF(User-Defined-Function) 一进一出 UDAF(User- Defined Aggregation Funcation) 聚集函数，多进一出。Count/max/min UDTF(User-Defined Table-G
分类：
其他好文 时间：
2016-02-24 22:36:39
阅读次数：
268
用maven打包写好的jar，在放到hive中作暂时函数时报错。 错误信息例如以下： hive> create temporary function maxvalue as "com.leaf.data.Maximum"; java.lang.SecurityException: Invalid s
分类：
其他好文 时间：
2016-02-16 20:36:53
阅读次数：
875
