码迷,mamicode.com
首页 >  
搜索关键字:hadoop block 策略    ( 46455个结果
第21章 策略模式(Strategy Pattern)
原文第21章 策略模式(Strategy Pattern)策略模式 导读:策略模式看完之后,大多数人都会感觉有点混了,包括我,感觉策略模式是一种OO思想的体现(纯属个人拙见)。 概述: 策略模式定义了一系列的算法,并将每一个算法封装起来,而且使它们还可以相互替换。策略模式让算法独立于使用它的客户.....
分类:其他好文   时间:2014-05-12 08:39:21    阅读次数:278
python 实现Hadoop的partitioner和二次排序
Hadoop Streaming 是一个工具, 代替编写Java的实现类,而利用可执行程序来完成map-reduce过程 工作流程 :  InputFile --> mappers --> [Partitioner] --> reducers --> outputFiles 理解 :  1 输入文件,可以是指定远程文件系统内的文件夹下的 * 2 通过集群自己分解到各个PC...
分类:编程语言   时间:2014-05-11 14:46:35    阅读次数:519
大数据Lambda架构
1 Lambda架构介绍 Lambda架构划分为三层,分别是批处理层,服务层,和加速层。最终实现的效果,可以使用下面的表达式来说明。 query = function(alldata) 1.1 批处理层 批处理层主用由Hadoop来实现,负责数据的存储和产生任意的视图数据。计算视图数据是一个联系操作,因此,当新数据到达时,使用MapReduce迭代地将数据聚集到视图中。 从整个数据集中计算...
分类:其他好文   时间:2014-05-11 07:29:44    阅读次数:419
安装orcle10g oel5.6
一、安装OEL 5.6 二、安装VMware Tools 1)  选择菜单里的VM选项,里面有一个子选项是installVMware Tools,选择它。 2)   回到操作系统,将光驱挂载到/mnt 下  [root@tyger~]# mount /dev/cdrom /mnt mount:block device /dev/cdrom is write-protected, mou...
分类:其他好文   时间:2014-05-11 07:15:48    阅读次数:431
经典算法宝典——贪婪思想(五)(1)
贪婪法(Greedy)又叫登山法,它的根本思想是逐步到达山顶,即逐步获得最优解,是解决最优化问题时的一种简单但适用范围有限的策略。“贪婪”可以理解为以逐步的局部最优,达到最终的全局最优。...
分类:其他好文   时间:2014-05-11 06:34:39    阅读次数:1444
memcached-session-manager 教程实现session共享
1简介     1.1决定用什么序列化策略。     1.2配置tomcat         1.2.1添加 memcached-session-manager jar 包到tomcat中。         1.2.2添加序列化相关的jar到你项目(可选的)。         1.2.3配置 memcached-session-manager 作为tomcat 的管理。...
分类:其他好文   时间:2014-05-11 05:35:20    阅读次数:395
常见Key-Value存储系统的内存管理策略解析
Key-Value存储作为NoSQL存储的一种常见方式,提供了比SQL数据库更好的可扩展性和读写性能。比如当前开源最热门的Memcached和Redis;淘宝的Tair、腾讯的Cmem、Amazon的Dynamo等等,无论是做缓存还是持久存储,均使用内存作为主要存储介质,故内存管理策略就显得尤为重要了,是影响性能的重要因素。 这里从源代码层面对Memcached、Redis和UDC(腾讯以前用的一套KV持久化存储系统)的内存管理策略进行分析,3者的内存管理策略各不相同,其他KV系统也和这3种方法大同小异了。...
分类:其他好文   时间:2014-05-11 04:48:13    阅读次数:387
【读书笔记】设计模式第五章:行为型模式
本文主要分析了模板方法模式、命令模式、责任链模式、策略模式、迭代器模式,介绍它们的定义、优缺点、使用场景,以及实例代码。为了深刻地理解设计模式,最重要的还是动手编写代码。 我参照书中的例程重新构想了一些更加生动、易于理解的例子,希望大家喜欢。 代码可以通过以下链接进行浏览: http://git.oschina.net/caipeichao/java-design-pattern 这些代码都经过编译运行,保证没有错误。...
分类:其他好文   时间:2014-05-11 04:44:19    阅读次数:289
Hadoop 学习资料集锦
Hadoop 资料虾皮系列教程。Sqoop 资料官方安装文档。浪迹天涯博客。……
分类:其他好文   时间:2014-05-11 01:07:23    阅读次数:298
block 数值排序 字面量的使用
// 创建一个block // 1.返回值 // 2.使用‘^’标记一个Block,并写出Block变量 // 3.确定Block参数列表,参数名可以省略 // 4.‘^’ // 5.参数列表 // 6.主题部分,‘{};’ // 7.在‘{}...
分类:其他好文   时间:2014-05-11 00:45:33    阅读次数:232
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!