王家林每日大数据语录Spark篇0043（2015.12.15于上海）:Worker在退出的时候会通过ExecutorRunner杀死Executor并且会将运行在当前Worker下的Driver Client删除掉，最终AppClient端的SparkDeploySchedulerBackend会 ...
分类：
其他好文 时间：
2016-04-18 13:32:24
阅读次数：
188
概述： 启动一个实例包含以下步骤： API server：处理用户请求并转发至cloud controller cloud controller：处理计算节点、网络控制、api server 以及scheduler的通信 scheduler：选择节点启动实例 Compute worker：管理实例， ...
分类：
其他好文 时间：
2016-04-17 22:13:41
阅读次数：
135
#定义Nginx执行的用户和用户组user www www; #nginx进程数。建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型，[ debug | info | notice | warn | error | crit ]error_log ar/lo ...
分类：
其他好文 时间：
2016-04-17 14:45:52
阅读次数：
168
转自 nginx的配置和使用 - chabale的专栏 - 博客频道 - CSDN.NEThttp://blog.csdn.net/chabale/article/details/8954226 #运行用户 user www-data; #启动进程,通常设置成和cpu的数量相等 worker_pro ...
分类：
其他好文 时间：
2016-04-15 18:11:24
阅读次数：
148
工作原理根据连接id将连接分配到线程组中,线程组中的listener线程监控任务并将事务类型的任务放入优先队列,非事务任务放入普通队列,worker线程优先将优先队列中的任务处理掉再处理普通队列中的任务,线程组中worker线程循环取出任务,执行,返回结果。在线程组之外有一个timer线程..
分类：
数据库 时间：
2016-04-14 07:03:59
阅读次数：
270
自己的小笔记： #user nobody;worker_processes 1; #error_log logs/error.log;#error_log logs/error.log notice;#error_log logs/error.log info; #pid logs/nginx.pi ...
工作原理图 源代码分析 包名：org.apache.spark.deploy.worker 启动driver入口点：registerWithMaster方法中的case LaunchDriver 1 caseLaunchDriver(driverId,driverDesc)=>{ ... ...
分类：
其他好文 时间：
2016-04-10 20:52:09
阅读次数：
428
之前调试都没有报错的，今天突然报错了，然后网上找了下资料，很快解决了问题 这是我报错的提示 解决办法： 用管理员身份运行CMD，输入netsh winsock reset并回车（注意，必须是已管理员身份运行，这个重置LSP连接) ...
分类：
其他好文 时间：
2016-04-10 11:31:21
阅读次数：
270
#定义Nginx运行的用户和用户组user www www; #nginx进程数，建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型，[ debug | info | notice | warn | error | crit ]error_log /var/ ...
分类：
其他好文 时间：
2016-04-09 10:36:40
阅读次数：
221
我相信，很多人都跟我一样，看书都不会太细致也不太认真思考，感觉书中讲的东西都应该是对的，最近读书时我发现以前认为理所当然的东西事实上压根都没有弄明白，最终的结果是，书是别人的，书中的知识也是别人的。 无论是看过的nginx有关书还是网上看到的有关nginx 配置说明的文章（http://wiki.n ...
分类：
其他好文 时间：
2016-04-07 10:49:31
阅读次数：
251
