线程池 无限制的创建线程 若采用"为每个任务分配一个线程"的方式会存在一些缺陷，尤其是当需要创建大量线程时： 线程生命周期的开销非常高 资源消耗 稳定性 引入线程池 任务是一组逻辑工作单元，线程则是使任务异步执行的机制。当存在大量并发任务时，创建、销毁线程需要很大的开销，运用线程池可以大大减小开销。 ...
分类：
编程语言 时间：
2019-10-08 19:12:51
阅读次数：
91
1. 概述 在前面，我们已经详细解析了 MyBatis 执行器 Executor 相关的内容，但是显然，Executor 是不适合直接暴露给用户使用的，而是需要通过 SqlSession 。 流程如下图： 示例代码如下： 而本文解析的类，都在 session 包下，整体类图如下： 老艿艿：省略了一部 ...
分类：
数据库 时间：
2019-10-05 12:33:19
阅读次数：
140
1. 概述 本文，我们来分享 SQL 执行的第四部分，SQL 执行后，响应的结果集 ResultSet 的处理，涉及 executor/resultset、executor/result、cursor 包。整体类图如下： 核心类是 ResultSetHandler 接口及其实现类 DefaultRe ...
分类：
其他好文 时间：
2019-10-05 12:22:18
阅读次数：
90
1. 概述 本文，我们来分享 SQL 执行的第五部分，延迟加载的功能的实现，涉及 executor/loader 包。整体类图如下： 从类图，我们发现，延迟加载的功能，是通过动态代理实现的。也就是说，通过拦截指定方法，执行数据加载，从而实现延迟加载。 并且，MyBatis 提供了 Cglib 和 J ...
分类：
其他好文 时间：
2019-10-05 12:21:07
阅读次数：
145
一、好处 1、通过重复利用已创建爱的线程降低线程创建和销毁造成的消耗：降低资源消耗 2、当任务到达时，任务可以不需要等到线程就能立即执行：提高响应速度 3、进行统一分配、调优和监控：提高线程的可管理性 二、Excutor 1、Executors：静态工厂类，提供了Executor、ExecutorS ...
分类：
编程语言 时间：
2019-10-05 10:52:29
阅读次数：
73
Spark在集群上的运行模式 http://spark.apache.org/docs/latest/cluster overview.html Component章节 1 Each application gets its own executor processes，所以各application ...
分类：
其他好文 时间：
2019-10-04 23:02:00
阅读次数：
111
4.2.1 下载并安装spark 下载文件名：spark-2.4.4-bin-without-hadoop.tgz 4.2.2 配置linux环境变量 4.2.3 配置spark-env.sh变量环境 4.2.4 修改slaves文件 4.2.5 拷贝到其他节点scp -r ~/spark-2.4. ...
分类：
其他好文 时间：
2019-10-02 23:04:32
阅读次数：
473
Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势： Spark提供了一个全面、统 ...
分类：
其他好文 时间：
2019-10-02 00:18:24
阅读次数：
145
failure: Lost task 18.3 in stage 17.0 (TID 59784,XXXXX, executor 19): java.lang.IllegalArgumentException: Row length is 0 场景是写入hbase： 当取出的line._1做为key ...
分类：
编程语言 时间：
2019-09-30 18:21:35
阅读次数：
101
1.executor接口，使用executor接口的子接口ExecutorService用来创建线程池2.Lock接口下的ReentrantLock类，实现同步，比如三个线程循环打印ABCABCABC...3.atomic包，使用AtomicInteger类的incrementAndGet()方法来 ...
分类：
其他好文 时间：
2019-09-28 13:03:26
阅读次数：
214
