上节说到接收器Acceptor在接收到socket后会有一系列简单的处理，其中将socket扔进线程池是最重要的一步，线程池是一个怎样东西？其原理在前面的“线程池原理”章节已经说明过了，这里重点讲tomcat中用于处理客户端请求的线程池——Executor。
为确保整个web服务器的性能，应该在接到请求后以最快的速度转交到其他线程上去处理。在接收到客户端的请求后tomcat将对这些请求交给任务执...
分类：
其他好文 时间：
2015-02-07 20:25:48
阅读次数：
222
Executor 框架是 juc 里提供的线程池的实现。前两天看了下 Executor 框架的一些源码，做个简单的总结。 线程池大概的思路是维护一个的线程池用于执行提交的任务。我理解池的技术的主要意义有两个： 1.? ? 资源的...
分类：
编程语言 时间：
2015-02-05 18:53:14
阅读次数：
367
我们直接看该Source的start方法吧
public void start() {
logger.info("Exec source starting with command:{}", command);
executor = Executors.newSingleThreadExecutor();
runner = new ExecRunnable(shell...
分类：
Web程序 时间：
2015-02-05 11:24:26
阅读次数：
282
这次 我们以指定executor-memory参数的方式来启动spark-shell： 启动成功了 在命令行中我们指定了spark-shell运行暂用的每个机器上的executor的内存为1g大小，启动成功后参看web页面： 从hdfs上读取文件： 在命令...
执行语句：
sudo spark-submit --master yarn--driver-memory 7G --executor-memory 5G --executor-cores 24 --num-executors 4--class spark.init.InitSpark /home/hxf/gogo.jar>/home/hxf/dddd.txt2>&1;
执行过程：...
分类：
其他好文 时间：
2015-02-02 10:49:28
阅读次数：
179
Acceptor是JIoEndpoint的内部类，主要的职责就是监听是否有客户端套接字连接并接收socket，再将socket交由任务执行者（Executor）执行。不断从系统底层读取socket，接着做尽可能少的处理（最好就是接收到后不做任何处理），最后扔进线程池。为什么强调要做尽可能少的处理？这里关系到系统性能问题，过多的处理会严重影响吞吐量。因为tomcat默认只有一个接收器（一条线程负责套...
分类：
其他好文 时间：
2015-02-01 20:32:32
阅读次数：
218
我用的mybatis3.0.5 如果你用的mybatis3.0.5的话就会存在这个问题(其他版本我不知道),我以解决,改版后的mybatis-3.0.5.jar提供下载,替换项目中就好! //org.apache.ibatis.executor.resultset.FastResultSetHandl...
分类：
其他好文 时间：
2015-01-30 19:46:34
阅读次数：
162
org.mybatis.spring.MyBatisSystemException: nested exception is org.apache.ibatis.executor.ExecutorException: Statement returned more than one row, whe...
分类：
其他好文 时间：
2015-01-27 21:34:41
阅读次数：
807
这次 我们以指定executor-memory参数的方式来启动spark-shell：
启动成功了
在命令行中我们指定了spark-shell运行暂用的每个机器上的executor的内存为1g大小，启动成功后参看web页面：
从hdfs上读取文件：
在命令行中返回的MappedRDD，使用toDebugString，可以查看其line...
这个模式所做的事情概括一下就是把多个不同的任务和操作合并到一个计算单元中，从而使云计算应用提高计算资源利用率，降低管理开销和任务之间连接交互的开销。
PS:我这里对后文中所翻译的“计算单元”做个小小的注释，这里的计算单元可以认为是逻辑的运行容器，可以是基于cgroup的各种container，也可以是像Storm中的worker，Spark中的Executor等等。这个模式除了在自己设计分布式系...
分类：
其他好文 时间：
2015-01-25 12:37:47
阅读次数：
333
