码迷,mamicode.com
首页 >  
搜索关键字:hadoop map reduce 分区 分组    ( 64817个结果
记住不要把Bitmap往List等集合放
很多时候,不注意这些细节,直接把bitmap放入List集合中,再者用完忘记清空bitmap,List集合,很容易造成内存泄露 就算你有良好的编程习惯,用完就清空掉,但是数据在list.add()循环的时候就报内存泄露了,还没等你清空,已经oom了 所以,开发中不建议把Bitmap放入list集合中...
分类:其他好文   时间:2014-07-22 23:04:34    阅读次数:287
模块管理常规功能自定义系统的设计与实现(16--模块数据的导出和打印[1])
模块数据的导出和打印(1)         一般管理软件的最终目的是要能输出数据,包括grid多条记录的导出和打印以及单条记录的导出和打印。对于这二种方式的导出和打印,我的设计思路是以下的方式。 一、grid数据的导出和打印。         grid数据的导出,我的设计是按照grid的字段分组和列的样式来导出。每个grid列表方案都可以按此方案来导出数据。即你看到的grid...
分类:其他好文   时间:2014-07-22 23:04:13    阅读次数:288
模块管理常规功能自定义系统的设计与实现(15--进一步完善"省份"模块)
“省份“模块的进一步完善         上面几节讲了一些导入数据,图表的功能,在说明导出功能之前,先把模块完善一下。可以完善的地方有: 1.给面积,人口,GDP加上单位; 2.GDP的文字写错了,写与GPD了,把他改正过来; 3.设置”所属区域“字段,可以进行分组; 4.设置”记录明细“中显示的字段,可以在右侧显示当前选中记录的明细。         由于本系统是全解释配置的...
分类:其他好文   时间:2014-07-22 23:02:34    阅读次数:290
hadoop wordCount运行
本文以康哥的博客为基础进行修改和补充,详见:http://kangfoo.github.io/article/2014/01/hadoop1.x-wordcount-fen-xi/hadoop mapreduce 过程粗略的分为两个阶段: 1.map; 2.redurce(copy, sor...
分类:其他好文   时间:2014-05-02 00:06:57    阅读次数:553
微信公众平台开发(88) 用户分组接口
本文介绍在微信公众平台上如何使用高级接口开发用户分组接口的功能。一、接口介绍开发者可以使用接口,对公众平台的分组进行查询、创建、修改操作,也可以使用接口在需要时移动用户到某个分组。一个公众账号,最多支持创建500个分组。接口调用请求说明创建分组http请求方式: POST(请使用https协议)ht...
分类:微信   时间:2014-05-01 19:32:09    阅读次数:658
hadoop技术基本架构
一、Hadoop概述 hadoop由两部分组成,分别是分布式文件系统和分布式计算框架MapReduce。其中,分布式文件系统主要用于大规模数据的分布式存储,而MapReduce 则构建在分布式文件系 统之上,对存储在分布式文件系统中的数据进行分布式计算。 2、在Hadoop 中,MapReduce 底层的分布式文件系统是独立模块,用户可按照约定的一套接口实现自己的分布式文件系统,然后经过简单...
分类:其他好文   时间:2014-05-01 18:34:41    阅读次数:382
CentOS6.5系统挂载NTFS分区的移动硬盘
作为IT的工作者,避免不了使用Linux系统,CentOS插入NTFS移动硬盘没有办法识别。通过三步就可以使CentOS识别NTFS分区的移动硬盘。...
分类:移动开发   时间:2014-04-30 22:33:39    阅读次数:443
Java web Session 监听类。
public class SessionListener implements HttpSessionListener { static Logger log = Logger.getLogger( SessionListener.class.getName()); private static Map map = new HashMap(); ...
分类:编程语言   时间:2014-04-30 22:31:38    阅读次数:397
javaScript Windows相关
javaScript 关于Windows 1 Windows 对象 所有浏览器都支持 window 对象。它表示浏览器窗口。 所有 JavaScript 全局对象、函数以及变量均自动成为 window 对象的成员。 全局变量是 window 对象的属性。 全局函数是 window 对象的方法。 window.document.getElementById("header"); 2...
分类:编程语言   时间:2014-04-30 22:27:39    阅读次数:499
MapReduce 编程模型
一、简介 1、MapReduce 应用广泛的原因之一在于它的易用性。它提供了一个因高度抽象化而变得异常简单的编程模型。 2、从MapReduce 自身的命名特点可以看出,MapReduce 由两个阶段组成:Map 和Reduce 。用户只需编写map ( ) 和reduce( ) 两个函数,即可完成简单的分布式程序的设计。   1)m a p ( ) 函数以key/value 对作为输入,产...
分类:其他好文   时间:2014-04-30 22:23:39    阅读次数:466
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!