CSDN圈子里大牛太多,作为一名90后,我只是想在这里留下自己每一个成长的脚印。也许当我老了,抑或N年以后再回过头来看看自己年轻时的足迹,一定别有一番感触!此篇谨献给一直都在拼命努力的自己!
一直在学习OS的相关知识,但学的一直都是理论,读了几遍《Modren Operating Systems》,以及《操作系统之哲学原理》和《深入理解LInux内核》,对OS算是很有感情吧。再加之...
分类:
其他好文 时间:
2015-05-27 10:24:05
阅读次数:
208
C# 4.0 并行计算部分 c#linq算法多线程list微软目录(?)[-] C 40 并行计算部分 一简单使用二 并行循环的中断和跳出三并行循环中为数组集合添加项四返回集合运算结果含有局部变量的并行循环五PLinqLinq的并行计算 C# 4.0 并行计算部分 沿用微软的写法,System.T....
并行程序设计原理读书笔记:基本的知识点;目的:并行计算入门。
分类:
其他好文 时间:
2015-05-24 17:08:53
阅读次数:
94
一、Hadoop核心项目
HDFS: Hadoop Distributed File System 分布式文件系统 MapReduce:并行计算框架
二、HDFS的架构
主从结构
? 主节点,只有一个: namenode? 从节点,有很多个: datanodes? namenode负责:? 接收用户操作请求? 维护文件系统的目录结构? 管理文...
分类:
其他好文 时间:
2015-05-24 12:59:35
阅读次数:
211
摘要:Fourinone是一个分布式并行计算框架,以轻量的方式提供了一个四合一的分布式框架功能以及简单易用的API,通过实现对多台计算机资源的统一利用,来获得强大的计算能力。本期我们采访了项目创始人彭渊。Fourinone(即Four-in-one,中文名字“四不像”)是一个分布式计算框架,提供了一...
分类:
其他好文 时间:
2015-05-24 10:01:35
阅读次数:
191
-module (exe9).
-export ([start/2,handle/4]).
% L=[2,12,14,25,31,42,43,43,13,34,34,41,41,312,352,354].
% 将数据分给各个进程,并创建
nodecreater([],Pids,M,Id,Master) ->
io:form...
分类:
编程语言 时间:
2015-05-22 11:42:26
阅读次数:
234
a. 由于MapReduce的shuffle过程需写磁盘,比较影响性能;而Spark利用RDD技术,计算在内存中进行.b. MapReduce计算框架(API)比较局限, 而Spark则是具备灵活性的并行计算框架.c. 再说说Spark API方面- Scala: Scalable Language...
分类:
其他好文 时间:
2015-05-21 18:50:09
阅读次数:
169
Share memory是片上资源,生命周期是整个block中,它的数据读写十分快,有1个cycle latency。在Share memory中,经常存在bank conflict问题,如果没有bank conflict问题,它的数据读写可以和片上的寄存器(Register)一样快。因此,我们需要尽量减少bank conflicts....
分类:
其他好文 时间:
2015-05-21 09:07:59
阅读次数:
222
What is RDD?
A Resilient Distributed Dataset(RDD),分布式弹性数据集,是Spark上的一个核心抽象
表示用于并行计算的,不可修改的,对数据集合进行分片的数据结构
在Spark上,针对各种各样的计算场景存在着各种各种的RDD,这些RDD拥有一些共同的操作,例如map,filter,persist等,就好像RDDs都是一个总RDD的子类一样,拥有所有...
分类:
其他好文 时间:
2015-05-17 13:47:42
阅读次数:
172
OpenCL (Open Computing Language,开放计算语言) 是一个为异构平台编写程序的框架,此异构平台可由CPU,GPU或其他类型的处理器组成。OpenCL提供了基于任务分割和数据分割的并行计算机制。
OpenCL 应用程序含有两部分(host和kernel)。OpenCL 主程序是纯软件例程,以标准C/C++编写,可以运行在任何类型的微处理器上。例如,这类处理器可以是FPGA中的嵌入式软核处理器、硬核ARM处理器或者外置x86处理器。如图所示。在这一主软件例程执行期间的某一点,某一功能...
分类:
其他好文 时间:
2015-05-16 21:53:03
阅读次数:
775