码迷,mamicode.com
首页 >  
搜索关键字:jsr mr    ( 1610个结果
[BestCoder Round #3] hdu 4908 BestCoder Sequence (计数)
BestCoder Sequence Problem Description Mr Potato is a coder. Mr Potato is the BestCoder. One night, an amazing sequence appeared in his dream. Length of this sequence is odd, the median...
分类:其他好文   时间:2014-08-04 17:42:57    阅读次数:282
Linux Token Auth 一次性密码认证
Linux Token Auth 一次性密码认证 http://netkiller.github.io/journal/token.html Mr.?Neo Chen?(netkiller),?陈景峰(BG7NYT) 中国广东省深圳市龙华新区民治街道溪山美地 518131 +86?13113668890 +86?755?...
分类:系统相关   时间:2014-08-04 14:49:17    阅读次数:677
HDU4908——BestCoder Sequence(BestCoder Round #3)
BestCoder SequenceProblem DescriptionMr Potato is a coder.Mr Potato is the BestCoder.One night, an amazing sequence appeared in his dream. Length of t...
分类:其他好文   时间:2014-08-04 13:25:37    阅读次数:213
Apache Crunch的设计 (上)
Apache Crunch是FlumeJava的实现,为不太方便直接开发和使用的MapReduce程序,开发一套MR流水线,具备数据表示模型,提供基础原语和高级原语,根据底层执行引擎对MR Job的执行进行优化。从分布式计算角度看,Crunch提供的许多计算原语,可以在Spark、Hive、Pig等地方找到很多相似之处,而本身的数据读写,序列化处理,分组、排序、聚合的实现,类似MapReduce各阶段的拆分都可以在Hadoop里找到影子。 本文介绍Crunch在数据表示模型、操作原语、序列化处理方面的设计和...
分类:其他好文   时间:2014-08-03 18:02:06    阅读次数:267
大数据分析技术
大数据分析技术MR :离线计算框架Storm :实时计算框架Spark :内存计算框架YARN 基本架构ResourceManager? 处理客户端请求? 启动/ 监控ApplicationMaster? 监控NodeManager? 资源分配与调度NodeManager? 单个节点上的资源管理? ...
分类:其他好文   时间:2014-08-02 09:57:33    阅读次数:285
[ACM] hdu 4248 A Famous Stone Collector (DP+组合)
A Famous Stone Collector Problem Description Mr. B loves to play with colorful stones. There are n colors of stones in his collection. Two stones with the same color are indistinguishable. M...
分类:其他好文   时间:2014-07-30 17:41:44    阅读次数:287
HDU 3001 Travelling
Description After coding so many days,Mr Acmer wants to have a good rest.So travelling is the best choice!He has decided to visit n cities(he insists on seeing all the cities!And he does not mind w...
分类:其他好文   时间:2014-07-30 17:37:14    阅读次数:306
hadoop编程小技巧(9)---二次排序(值排序)
代码测试环境:Hadoop2.4应用场景:在Reducer端一般是key排序,而没有value排序,如果想对value进行排序,则可以使用此技巧。应用实例描述:比如针对下面的数据:a,5 b,7 c,2 c,9 a,3 a,1 b,10 b,3 c,1如果使用一般的MR的话,其输出可能是这样的:a 1 a 3 a 5 b 3 b 10 b 7 c 1 c 9 c 2从数据中可以看到其键是排序的,但...
分类:其他好文   时间:2014-07-30 17:29:34    阅读次数:358
hadoop编程小技巧(8)---Unit Testing (单元测试)
所需环境:Hadoop相关jar包(下载官网发行版即可);下载junit包(最新为好);下载mockito包;下载mrunit包;下载powermock-mockito包;相关包截图如下:应用场景:在进行Hadoop的一般MR编程时,需要验证我们的业务逻辑,或者说是验证数据流的时候可以使用此环境,这个环境不要求真实的云平台,只是针对算法或者代码逻辑进行验证,方便调试代码。实例:Mapper:pac...
分类:其他好文   时间:2014-07-29 15:15:00    阅读次数:373
分水岭分割算法
建立不同目标间的分水岭(涨水法)。分水岭计算步骤:1、设待分割图象为f(x,y),其梯度图象为g(x,y)2、用M1, M2, …, MR表示g(x, y)中各局部极小值的象素,位置,C(Mi)为与Mi对应的区域中的象素坐标集合3、用n表示当前灰度阈值,T[n]代表记为(u,v)的象素集合,g(u,...
分类:其他好文   时间:2014-07-28 23:48:14    阅读次数:373
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!