本文讲解了Storm故障容忍性(Fault-Tolerance)的设计细节：当Worker、节点、Nimbus或者Supervisor出现故障时是如何实现故障容忍性，以及Nimbus是否存在单点故障问题。...
分类：
其他好文 时间：
2015-02-17 17:40:45
阅读次数：
128
在打开nginx过程中，将connections加大的时候Nginx发出警告：worker_connectionsexceedopenfileresourcelimit:1024此警告的问题是受限于Linux的最大文件数限制。环境：centos7.064bitulimit-n查看用户打开的最大文件数：1024此处的1024是每个进程打开的最大文件数，对于系统的..
分类：
其他好文 时间：
2015-02-15 23:17:13
阅读次数：
984
通常，当服务涉及到的数据量大到一定程度以后，我们会考虑拆分数据。在这种分布式架构中，每个结点只拥有总数据量的其中一部分，而最终的输出结果会汇总所有结点的结果。这种Map-reduce思想的架构，是尽量不去查分程序，而只是拆分数据来支持大数据的处理，如下图所示。这种框架对每个worker结点的可靠性要求比较高，如果某一个worker结点挂掉了，那么最后的输出结果将是不全的。
我设计的这个分...
分类：
其他好文 时间：
2015-02-15 18:10:47
阅读次数：
134
每天一点数据库之-----Day 6 数据分组与数据分页
----转载请注明出处:coder-pig
本节引言:
本节继续来学习SQL中的数据查询中的数据分组~
先建个表,录几条数据,顺道复习下之前学的内容~
之前建立的T_Worker都用了几天了,今天就来弄个新的表吧T_Product商品表:...
分类：
数据库 时间：
2015-02-14 11:02:48
阅读次数：
217
#!/usr/bin/python
# -*- coding:utf-8 -*-
import os
import threading
import multiprocessing
import time
#Process entry
def process_worker(sign,lock,function):
global count_process
#lock.acquir...
分类：
编程语言 时间：
2015-02-13 18:31:28
阅读次数：
172
#usernobody;
#工作进程数(worker),一般等于cpu内核数或者两倍
worker_processes2;
#error_loglogs/error.log;
#error_loglogs/error.lognotice;
#error_loglogs/error.loginfo;
#pidlogs/nginx.pid;
events{
worker_connections1024;
}
http{
includemime.types;
defau..
分类：
其他好文 时间：
2015-02-13 11:46:58
阅读次数：
206
上一篇已经分析了rpool 的三个module , 以及简单的物理关系. 这次主要分析用户进程和 worker_pool 进程还有worker_pool_worker 进程之间的调用关系. 在开始之前, 必须先明确一点, 就是一个worker_pool_worker 进程只有在处理完一个用户进程的任...
分类：
其他好文 时间：
2015-02-12 19:49:10
阅读次数：
257
一、环境一台nginx做反向代理：192.168.88.142两台tomcat机器做web：192.168.88.143192.168.88.144安装过程略，下一篇详细说明二、nginx配置文件nginx：192.168.88.142userwwwwww;##用户和组worker_processes1;##和cpu核数有关events{useepoll;##nginx的工作模式worker_connect..
分类：
其他好文 时间：
2015-02-12 02:06:08
阅读次数：
269
在RabbitMQ中,pool 是以worker_pool 的形式存在的, 其主要用途之一是对Mnesia transaction的操作. 而在RabbitMQ 中, pool 中的worker 数量是固定不变的, 是和虚拟机的schedulers 相关.这次会首先分别分析设计worker_pool...
分类：
其他好文 时间：
2015-02-12 00:36:36
阅读次数：
216
Aselfobject, which is the global object representing the worker in this scope.对self对象的译法，未知妥否。 1 // Call the invertImage method when this worker recei...
分类：
Web程序 时间：
2015-02-11 23:16:34
阅读次数：
273
