java 程序 package com.ibeifeng.udaf; import org.apache.hadoop.hive.ql.exec.UDAF; import org.apache.hadoop.hive.ql.exec.UDAFEvaluator; public class Wm_co
分类：
其他好文 时间：
2016-02-05 01:42:44
阅读次数：
308
函数分类内置函数：简单函数(map)，聚合函数(reduce)，集合函数(map)，特殊函数正则表达式自定义函数:UDF(map),UDAF(reduce) 1.显示当前会话有多少函数可用show functions2.显示函数的描述信息desc function concat3.显示函数的扩展描述
分类：
其他好文 时间：
2016-01-30 13:29:36
阅读次数：
165
当Hive提供的内置函数无法满足你的业务处理需要时，此时就可以考虑使用用户自定义函数。UDF用户自定义函数（user defined function)–针对单条记录。
创建函数流程
1、自定义一个Java类
2、继承UDF类
3、重写evaluate方法
4、打成jar包
6、在hive执行add jar方法
7、在hive执行创建模板函数
8、hql中使用Demo01:
自定义...
分类：
其他好文 时间：
2015-07-22 00:05:25
阅读次数：
296
FROM :http://hugh-wangp.iteye.com/blog/1472371自己写代码时候的利用到的模板UDF步骤：1.必须继承org.apache.hadoop.hive.ql.exec.UDF2.必须实现evaluate函数，evaluate函数支持重载Java代码package...
分类：
其他好文 时间：
2015-06-18 23:47:50
阅读次数：
138
用maven打包写好的jar，在放到hive中作临时函数时报错。
错误信息如下：
hive> create temporary function maxvalue as "com.leaf.data.Maximum";
java.lang.SecurityException: Invalid signature file digest for Manifest main attribu...
分类：
其他好文 时间：
2015-06-06 16:38:31
阅读次数：
227
在使用hive进行数据处理时，经常会用到group by语法，但对分组的操作，hive没有mysql支持得好：
group_concat([DISTINCT] 要连接的字段 [Order BY
ASC/DESC 排序字段] [Separator '分隔符'])
hive只有一个collect_set内置函数，返回去重后的元素数组，但我们可以通过编写UDAF，来实现这些功能。...
分类：
其他好文 时间：
2015-05-05 22:06:53
阅读次数：
524
UDAF有两种，第一种是比较简单的形式，利用抽象类UDAF和UDAFEvaluator，暂不做讨论。主要说一下第二种形式，利用接口GenericUDAFResolver2（或者抽象类AbstractGenericUDAFResolver）和抽象类GenericUDAFEvaluator。 这里用A....
分类：
其他好文 时间：
2015-03-11 19:28:09
阅读次数：
283
Hive可以允许用户编写自己定义的函数UDF，来在查询中使用。Hive中有3种UDF：UDF：操作单个数据行，产生单个数据行；UDAF：操作多个数据行，产生一个数据行。UDTF：操作一个数据行，产生多个数据行一个表作为输出。用户构建的UDF使用过程如下：第一步：继承UDF或者UDAF或者UDTF，实...
分类：
其他好文 时间：
2015-01-20 17:09:32
阅读次数：
192
Hive自定义函数UDAF开发
Hive支持自定义函数，UDAF是接受多行,输出一行。
通常是group by时用到这种函数。
其实最好的学习资料就是官方自带的examples了。
我这里用的是0.10版本hive，所以对于的examples在
https://github.com/apache/hive/tree/branch-0.10/contri...
分类：
其他好文 时间：
2014-12-14 00:46:21
阅读次数：
202
