Reduce计算分为若干阶段1. copy(或者叫shuffle)阶段和merge阶段并行之前Map产生的结果被存放在本地磁盘上，这时需要从reduce节点将数据从map节点复制过来。放得下进内存，比较大的则写到本地磁盘。同时，有两个线程对已经获得的内存中和磁盘上的数据进行merge操作。具体细节是：通过RPC调用询问task tracker已经完成的map task列表，shuffle（洗牌）是...
分类：
其他好文 时间：
2014-10-04 15:41:56
阅读次数：
240
Go语言中的内建函数new和make是两个用于内存分配的原语（allocation primitives）。对于初学者，这两者的区别也挺容易让人迷糊的。简单的说，new只分配内存，make用于slice，map，和channel的初始化。
分类：
其他好文 时间：
2014-10-03 15:14:44
阅读次数：
206
FastDFS上传/下载过程：首先客户端 client 发起对 FastDFS 的文件传输动作，是通过连接到某一台 Tracker Server 的指定端口来实现的，Tracker Server 根据目前已掌握的信息，来决定选择哪一台 Storage Server ，然后将这个Storage Ser...
分类：
其他好文 时间：
2014-09-26 19:58:18
阅读次数：
182
May 01, 2003 ByGianluca InsolvibileinEmbeddedSoftwareCall some useful fuctions of the GNU C library to save precious memory and to find nasty bugs.Dea...
分类：
其他好文 时间：
2014-09-23 12:44:54
阅读次数：
455
Hadoop端口说明：默认端口 设置位置 描述信息8020 namenode RPC交互端口8021 JT RPC交互端口50030 mapred.job.tracker.http.address JobTracker administrative web GUI JOBTRACKER的HTTP服务...
分类：
其他好文 时间：
2014-09-19 15:26:05
阅读次数：
168
http://cs.au.dk/~mis/dOvs/slides/Kevin-linear-scan-reg-alloc.pdf ftp://ftp.ssw.uni-linz.ac.at/pub/Papers/Moe02.PDF Greedy Register Allocation in LLVM 3.0 http://blog.llvm.org/2011/09/greedy-registe...
分类：
其他好文 时间：
2014-09-18 20:49:45
阅读次数：
577
估计80%以上接触互联网的人都知道bt是什么东西，任何一个用bt下载的人都知道这样一个概念，种子。bt种子就是记录了p2p对等网络中tracker, nodes, files等信息，也就是说，这个种子告诉你，你要下载什么，到哪里下载。bt种子文件有自己的文件格式，下面简单看看bt种子文件的结构。.....
分类：
其他好文 时间：
2014-09-18 18:41:44
阅读次数：
180
数据传输测试，先从主机传输到设备，再在设备内传输，再从设备传输到主机。H-->DD-->DD-->H 1 // moveArrays.cu 2 // 3 // demonstrates CUDA interface to data allocation on device (GPU) 4 // an...
分类：
其他好文 时间：
2014-09-18 18:27:54
阅读次数：
189
Android4.4 fence机制分析
在任何一个系统中，无可避免的都会跟各种buffers打交道，最经典的模式就是消费-生产者模式，一个独立的buffer在它们之间的交换等操作都需要一个机制来控制每个buffer的“生命周期”，即ALLOCATION
和 RELEASE ，此外还要考虑到同步性问题，什么时候可以read buffer和write buffer都需要听从调遣。
在an...
分类：
移动开发 时间：
2014-09-12 15:13:43
阅读次数：
325
Aspects of the present invention are directed at centrally managing the allocation of memory to executable images in a way that inhibits malware from ...
分类：
其他好文 时间：
2014-09-10 19:14:50
阅读次数：
327
