MapReduce是一个编程模型,和处理,产生大数据集的相关实现.用户指定一个map函数处理一个key/value对,从而产生中间的key/value对集.然后再指定一个reduce函数合并所有的具有相同中间key的中间value.下面将列举许多可以用这个模型来表示的现实世界的工作.以这种方式写的程...
分类：
其他好文 时间：
2014-10-29 23:47:03
阅读次数：
441
MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念"Map（映射）"和"Reduce（归约）"，和他们的主要思想，都是从函数式编程语言里借来的，还有从矢量编程语言里借来的特性。他极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。 当前的软...
分类：
其他好文 时间：
2014-10-24 20:20:24
阅读次数：
312
它微软推出的基于Windows Vista的用户界面框架；它提供了统一的编程模型、语言和框架，真正做到了分离界面设计人员与开发人员的工作。WPF和.NET中winForm是类似的。...
事件，是C#编程模型中重要的一个概念，通过对事件的理解，可以更好的了解C#程序运行机制。C#中的事件，可以简单的理解为类或者对象发生了一件事，并且把这件事通知给了其他的类或者对象，其他的类或者对象可以根据事件的消息有所反应。这非常类似设计模式中的观察者模式。引发事件的类或对象，可以称之为事件源，注册...
jobtracker变成了ResourceManager和ApplicationMaster;
tasktraker变成了nodeManager
applicationMaster是一个可变更的部分，用户可以对不同的编程模型些自己的applicationMaster...
分类：
其他好文 时间：
2014-10-19 23:18:52
阅读次数：
196
WCF后传系列（10）：消息处理功能核心摘要:WCF是一个通信框架，同时也可以将它看成是一个消息处理或者传递的基础框架，它可以接收消息、对消息做处理，或者根据客户端给定的数据构造消息并将消息发送到目标端点，在这个过程中，一切都是围绕“消息”而展开的。WCF在消息处理体系结构提供统一编程模型的同时，还...
分类：
其他好文 时间：
2014-10-16 22:06:03
阅读次数：
201
在我们的处理函数中可以如下监听客户端的连接：
SOCKET listenSock = socket( AF_INET, SOCK_STREAM, IPPROTO_TCP );
sockaddr_in sin;
sin.sin_family = AF_INET;
sin.sin_port = htons(7788);
sin.sin_addr.S_un.S_ad...
分类：
其他好文 时间：
2014-10-15 10:29:30
阅读次数：
319
使用该模型时，在服务端我们可以开辟两个线程，一个线程用来监听客户端的连接
请求，另一个用来处理客户端的请求。主要用到的函数为select函数。如：
线程1处理函数：
SOCKET listenSock = socket( AF_INET, SOCK_STREAM, IPPROTO_TCP );
sockaddr_in sin;
sin.sin_famil...
分类：
其他好文 时间：
2014-10-15 09:23:10
阅读次数：
183
WsaEventSelect模型是一个不用主动去轮询所有客户端套接字是否有数据到来的模型，它也是在客户端有数据到来时，系统发送通知给我们的程序，但是，它不是发送消息，而是通过事件的方式来通知我们的程序，这就解决了WsaAsyncSelect模型只能用在windows程序的问题。
该模型的实现，我们也可以开辟两个线程来进行处理，一个用来接收客户端的连接请求，一个用来与客户端进行通信，用到的主要...
分类：
其他好文 时间：
2014-10-15 09:22:30
阅读次数：
194
上文《.Net中的并行编程-3.ConcurrentQueue实现与分析》分析了ConcurrentQueue的实现，本章就基于ConcurrentQueue实现一个高性能的异步队列，该队列主要用于实时数据流的处理并简化多线程编程模型。设计该队列时考虑以下几点需求（需求来自公司的一个实际项目）： 1...
分类：
Web程序 时间：
2014-10-13 00:42:58
阅读次数：
239
