Nginx基本参数 #运行用户 user nobody; #worker进程的个数；通常应该为物理CPU核数减1； #可以为”auto”，实现自动设定（worker_processes auto） worker_processes 1; #全局错误日志及PID文件 #error_log logs/e ...
分类：
其他好文 时间：
2019-08-27 16:55:02
阅读次数：
74
######Nginx配置文件nginx.conf中文详解##### #定义Nginx运行的用户和用户组user www www; #nginx进程数，建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型，[ debug | info | notice | w ...
分类：
其他好文 时间：
2019-08-24 21:16:26
阅读次数：
73
SELECT TOP 1000 QS.creation_time, SUBSTRING(ST.text, (QS.statement_start_offset / 2) + 1, ((CASE QS.statement_end_offset WHEN - 1 THEN DATALENGTH(st.t... ...
分类：
数据库 时间：
2019-08-24 18:46:49
阅读次数：
152
搭建集群： SPARK_WORKER-CORES : 当计算机是32核双线程的时候，需要指定SPARK_WORKER_CORES的个数为64个 SPARK_WORKER_MEMORY : 任务提交： ./spark-submit --master node:port --executor-cores ...
分类：
其他好文 时间：
2019-08-24 09:15:58
阅读次数：
155
好程序员大数据学习路线分享MAPREDUCE，需求：统计大量的文本文件中的单词出现的次数1）整个运算需要分阶段阶段一：并行局部运算阶段二：汇总处理，不同的阶段需要开发不同的程序2）阶段之间的调用3）业务程序（task程序）如何并发到集群并启动程序4）如何监控task程序的运行状态，如何处理异常::这些问题是开发分布式程序都会面临的问题，完全可以封装成框架::MR的结构一个完整的MapReduc
分类：
其他好文 时间：
2019-08-23 00:24:34
阅读次数：
114
worker_cpu_affinity auto;Binds worker processes to the sets of CPUs. worker_rlimit_nofile number;worker进程所能打开的最大文件描述符数量，一般与ulimit -n相同即可 error_log log ...
分类：
其他好文 时间：
2019-08-23 00:13:19
阅读次数：
112
1 # -*- coding:utf-8 -*- 2 from multiprocessing import Pool 3 import os,time,random 4 5 6 def worker(msg): 7 t_start = time.time() 8 print("%s开始执行" % ... ...
分类：
系统相关 时间：
2019-08-21 15:14:52
阅读次数：
107
这篇文章对ThreadPoolExecutor创建的线程池如何操作线程的生命周期通过源码的方式进行详细解析。通过对execute方法、addWorker方法、Worker类、runWorker方法、getTask方法、processWorkerExit从源码角度详细阐述，文末有彩蛋。 exexcte ...
分类：
编程语言 时间：
2019-08-21 09:59:26
阅读次数：
82
因为在OpenShift 4.1环境中不建议直接登录集群主机操作，因此很多操作可能需要在外部的Client VM上完成。当然用rhel的worker node的同事也可以和原来习惯保持一致。 这里记录一下常见的情形: 设置集群访问 上传镜像到内部镜像仓库 暴露image-registry路由，缺省不 ...
分类：
其他好文 时间：
2019-08-20 16:53:37
阅读次数：
196
主配置文件解读 过滤conf文件的内容 nginx.conf主配置文件 1 #定义Nginx运行的用户和用户组 2 user www www; 3 4 #nginx进程数，建议设置为等于CPU总核心数。 5 worker_processes 8; 6 7 #全局错误日志定义类型，[ debug | ...
分类：
其他好文 时间：
2019-08-17 20:23:05
阅读次数：
278
