码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop的NullWritable

时间:2016-08-28 17:53:41      阅读:105      评论:0      收藏:0      [点我收藏+]

标签:

NullWritable是Writable的一个特殊类,实现方法为空实现,不从数据流中读数据,也不写入数据,只充当占位符,如在MapReduce中,如果你不需要使用键或值,你就可以将键或值声明为NullWritable,NullWritable是一个不可变的单实例类型。

比如,我设置map的输出为<key,空>,这样做:

1 public class IPCountMapper extends Mapper<LongWritable, Text, Text, NullWritable> {
2 
3     @Override
4     protected void map(LongWritable key, Text value, Mapper<LongWritable, Text, Text, NullWritable>.Context context)
5             throws IOException, InterruptedException {
6         String parseIP = LogParseUtil.parseIP(value.toString());
7         context.write(new Text(parseIP), NullWritable.get());
8     }

不能使用new NullWritable()来定义,获取空值只能NullWritable.get()来获取

hadoop的NullWritable

标签:

原文地址:http://www.cnblogs.com/Skyar/p/5815486.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!