目录 一、MapReduce/Hadoop 1.编程模型 2.系统实现 3.典型算法 二、Microsoft Dryad (本文为陈世敏老师课程笔记) 一、MapReduce/Hadoop Google 2014年推出。 1.编程模型 整体思路:程序员串行写程序 ,系统分布式并行完成,但要有很多限制 ...
分类:
其他好文 时间:
2017-06-02 22:03:11
阅读次数:
205
RMI的定义 RPC (Remote Procedure Call):远程方法调用,用于一个进程调用另一个进程中的过程,从而提供了过程的分布能力。 RMI(Remote Method Invocation):远程方法调用,即在RPC的基础上有向前迈进了一步,提供分布式对象间的通讯。允许运行在一个ja ...
分类:
编程语言 时间:
2017-06-01 22:41:21
阅读次数:
287
阅读目录 一、简单的串行执行程序 二、使用委托来实现APM 阅读目录 一、简单的串行执行程序 二、使用委托来实现APM 源码地址:https://github.com/Jackson0714/Threads 原文地址:C#多线程之旅(4)——APM初探 C#多线程之旅目录: C#多线程之旅(1)—— ...
分类:
编程语言 时间:
2017-05-30 20:52:48
阅读次数:
286
线程 线程是系统调度的基本单元,每当创建一个进程时,会有许多的线程,也叫轻量级进程,在一个进程中拥有多个线程,各自都有自己的计数器,堆和局部变量属性,并且能够分享内存变量. 为什么要使用多线程 1.更多的处理器核心 2.更快的响应时间 3.更好的编程模型 优先级 线程优先级决定了线程需要多或少分配一 ...
分类:
编程语言 时间:
2017-05-29 10:00:57
阅读次数:
234
提到列式(ColumnFamily)数据库,就不得不提Google的BigTable,其开源版本就是我们熟知的HBASE。BigTable建立在谷歌的另两个系统GFS和Chubby之上,这三个系统和分布式计算编程模型MapReduce共同构成Google云计算的基础,Chubby解决主从自动切换的基矗接下来通过一个表格对比来引..
分类:
其他好文 时间:
2017-05-23 21:38:55
阅读次数:
277
为了使读者对基于WCF的编程模型有一个直观的映像,我将带领读者一步一步地创建一个完整的WCF应用。本应用功能虽然简单,但它涵盖了一个完整WCF应用的基本结构。对那些对WCF不是很了解的读者来说,这个例子将带领你正式进入WCF的世界。 在这个例子中,我们将实现一个简单的计算服务(CalculatorS ...
分类:
其他好文 时间:
2017-05-21 12:43:36
阅读次数:
172
=Go 语言中的并发可以用两种方式实现: 第一种方式,支持顺序通信进程(communicating sequential processes),简称 CSP。CSP是一种现代的并发编程模型,在这种编程模型中值会在不同的运行实例(goroutine)中传递,尽管大多数情况下仍然是被限制在单一实例中。 ...
分类:
其他好文 时间:
2017-05-18 13:33:22
阅读次数:
156
网络编程技术 Java 网络编程 网络基础知识 网络编程的目的:直接或间接地通过网络协议与其他计算机进行通讯。 网络编程中有两个主要的问题: 1.如何准确地定位网络上一台或多台主机。 2.找到主机后如何可靠高效地进行数据传输。 目前较为流行的网络编程模型是客户端/服务器(C/S)结构。 即通信双方一 ...
分类:
其他好文 时间:
2017-05-18 01:33:47
阅读次数:
239
大纲: (1)基础概念回顾 (2)Linux的I/O模式 (3)事件驱动编程模型 (4)select/poll/epoll的区别和Python示例 网络编程里常听到阻塞IO、非阻塞IO、同步IO、异步IO等概念,总听别人装13不如自己下来钻研一下。不过,搞清楚这些概念之前,还得先回顾一些基础的概念。 ...
分类:
系统相关 时间:
2017-05-16 23:37:04
阅读次数:
5135
离线计算 离线计算:批量获取数据、批量传输数据、周期性批量计算数据、数据展示 代表技术:Sqoop批量导入数据、HDFS批量存储数据、MapReduce批量计算数据、Hive批量计算数据、azkaban/oozie任务调度 流式计算 流式计算:数据实时产生、数据实时传输、数据实时计算、实时展示 代表 ...
分类:
其他好文 时间:
2017-05-15 23:52:38
阅读次数:
465