一、Hive-sql优化 #增加reducer任务数量(拉取数量分流) set mapred.reduce.tasks=20; #在同一个sql中的不同的job是否可以同时运行,默认为false set hive.exec.parallel=true; #增加同一个sql允许并行任务的最大线程数 s ...
分类:
数据库 时间:
2020-05-11 01:21:52
阅读次数:
80
Tomcat的吞吐量大小取决Io的很大的因素,同时可以通过调整启动项目中的配置,来做一些性能的提升。 重要的三个配置项:maxConnections、maxThreads、acceptCount。 首先来看下maxConnections最连接数、maxThreads最大线程数、acceptCount ...
分类:
其他好文 时间:
2020-05-01 17:00:02
阅读次数:
83
本文重点讲解当线程池的任务过多时,如何去拒绝这些任务。 拒绝条件 1.线程已经shutdown了,需要拒绝 2.最大线程数或者队列已经满了,需要拒绝 拒绝策略 1.abortPolicy: 直接抛出异常 2.discardPolicy:任务丢弃,收不到通知 3.discardOldestPolicy ...
分类:
编程语言 时间:
2020-04-21 15:20:26
阅读次数:
109
问题: dubbo线程池耗尽,活跃线程数超过线程池最大线程数(dubbo默认线程池最大线程数为200) 登录服务提供者所在服务器 通过命令行连接dubbo: //telnet 服务提供者ip dubbo端口 telnet 20.1.16.26 20881 查看dubbo活跃线程: status -l ...
分类:
编程语言 时间:
2020-04-03 12:02:43
阅读次数:
240
根据《阿里巴巴java编程规范》,线程池的创建必须使用 来创建 关于不同的线程数时线程池的状态: 0 < 线程数 <= 核心线程数:直接运行 核心线程数 < 线程数 <= 最大线程数:如果线程池中多于核心线程但少于最大线程的那部分线程没有关闭,则直接添加执行;如果关闭了则先加入阻塞队列,待线程池创建 ...
分类:
编程语言 时间:
2020-03-24 12:25:02
阅读次数:
64
系统最大线程数说明 系统可开启的最大线程数,可根据系统本身负载配置进行调优。 查看系统最大线程数 1、查看系统开启的最大线程数。 [root@node01 ~]# ulimit -u 3818 2、查系统支持的最大线程数,一般会很大,相当于理论值。 [root@node01 ~]# cat /pro ...
分类:
编程语言 时间:
2020-03-15 11:39:23
阅读次数:
117
ThreadPoolExecutor 创建和管理线程池,减少内存消耗,提高执行效率。 任务执行过程 1.当线程数小于核心线程数时,创建线程; 2.当线程数大于等于核心线程数,且任务队列未满时,将任务放入任务队列; 3.当线程数大于等于核心线程数,且任务队列已满: 若线程数小于最大线程数,创建线程 若 ...
分类:
编程语言 时间:
2020-02-11 00:06:53
阅读次数:
76
线程池参数详解 |参数|说明| |: |: | |corePoolSize|表示常驻核心线程数量。| |maximumPoolSize|表示线程池中能同时执行的最大线程数量。这个值必须大于等于corePoolSize,如果这两个值相等,那就是固定大小的线程池。| |keepAliveTime|表示线 ...
分类:
编程语言 时间:
2020-01-25 10:31:29
阅读次数:
98
1.工具类基类(配置类):ExecutorSchdule 1 public interface ExecutorSchdule { 2 3 //corePoolSize 表示允许线程池中允许同时运行的最大线程数。 4 int corePoolSize = 40; 5 6 //maximumPoolS ...
分类:
编程语言 时间:
2020-01-20 14:40:48
阅读次数:
75
1、线程池工作原理 Java线程池主要用于管理线程组及其运行状态。其主要作用是线程复用、线程资源管理、控制操作系统的最大并发数。 Java线程池的工作原理:JVM先根据用户的参数创建一定数量的可运行的线程任务,并将其放入队列中,在线程创建后启动这些任务,如果线程数量超过了最大线程数量,则超出数量的线 ...
分类:
编程语言 时间:
2020-01-16 22:11:42
阅读次数:
77