- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章基于ThreadPoolTaskExecutor的使用说明由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
当我们需要实现并发、异步等操作时,通常都会使用到ThreadPoolTaskExecutor,现对其使用稍作总结.
处理流程 。
当一个任务被提交到线程池时,首先查看线程池的核心线程是否都在执行任务,否就选择一条线程执行任务,是就执行第二步.
查看核心线程池是否已满,不满就创建一条线程执行任务,否则执行第三步.
查看任务队列是否已满,不满就将任务存储在任务队列中,否则执行第四步.
查看线程池是否已满,不满就创建一条线程执行任务,否则就按照策略处理无法执行的任务.
在ThreadPoolExecutor中表现为:
如果当前运行的线程数小于corePoolSize,那么就创建线程来执行任务(执行时需要获取全局锁).
如果运行的线程大于或等于corePoolSize,那么就把task加入BlockQueue.
如果创建的线程数量大于BlockQueue的最大容量,那么创建新线程来执行该任务.
如果创建线程导致当前运行的线程数超过maximumPoolSize,就根据饱和策略来拒绝该任务.
关闭线程池 。
调用shutdown或者shutdownNow,两者都不会接受新的任务,而且通过调用要停止线程的interrupt方法来中断线程,有可能线程永远不会被中断,不同之处在于shutdownNow会首先将线程池的状态设置为STOP,然后尝试停止所有线程(有可能导致部分任务没有执行完)然后返回未执行任务的列表。而shutdown则只是将线程池的状态设置为shutdown,然后中断所有没有执行任务的线程,并将剩余的任务执行完.
配置线程个数 。
如果是CPU密集型任务,那么线程池的线程个数应该尽量少一些,一般为CPU的个数+1条线程.
如果是IO密集型任务,那么线程池的线程可以放的很大,如2*CPU的个数.
对于混合型任务,如果可以拆分的话,通过拆分成CPU密集型和IO密集型两种来提高执行效率;如果不能拆分的的话就可以根据实际情况来调整线程池中线程的个数.
监控线程池状态 。
常用状态 。
taskCount:线程需要执行的任务个数.
completedTaskCount:线程池在运行过程中已完成的任务数.
largestPoolSize:线程池曾经创建过的最大线程数量.
getPoolSize:获取当前线程池的线程数量.
getActiveCount:获取活动的线程的数量 。
通过继承线程池,重写beforeExecute,afterExecute和terminated方法来在线程执行任务前,线程执行任务结束,和线程终结前获取线程的运行情况,根据具体情况调整线程池的线程数量.
最近线上出现一个奇葩问题,使用的是ThreadPoolTaskExecutor来处理后续服务调用,刚开始运行ThreadPoolTaskExecutor处理后续服务调用是没有问题的,但是一段时间之后,发现后续服务一直没有被调用,导致了极其严重的后果 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
|
<
bean
id
=
"threadPoolTaskExecutor"
class
=
"org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor"
>
<!-- 核心线程数,默认为1 -->
<
property
name
=
"corePoolSize"
value
=
"5"
/>
<!-- 最大线程数,默认为Integer.MAX_VALUE -->
<
property
name
=
"maxPoolSize"
value
=
"16"
/>
<!-- 队列最大长度,一般需要设置值>=notifyScheduledMainExecutor.maxNum;默认为Integer.MAX_VALUE -->
<!--<property name="queueCapacity" value="10" />-->
<!-- 线程池维护线程所允许的空闲时间,默认为60s -->
<
property
name
=
"keepAliveSeconds"
value
=
"300"
/>
<!-- 线程池对拒绝任务(无线程可用)的处理策略,
目前只支持AbortPolicy、CallerRunsPolicy;默认为后者
-->
<
property
name
=
"rejectedExecutionHandler"
>
<!-- AbortPolicy:直接抛出java.util.concurrent.RejectedExecutionException异常 -->
<!-- CallerRunsPolicy:
主线程直接执行该任务,执行完之后尝试添加下一个任务到线程池中,
-->
<!-- DiscardOldestPolicy:
抛弃旧的任务、暂不支持;会导致被丢弃的任务无法再次被执行
-->
<!-- DiscardPolicy:
抛弃当前任务、暂不支持;会导致被丢弃的任务无法再次被执行
-->
<
bean
class
=
"java.util.concurrent.ThreadPoolExecutor$CallerRunsPolicy"
/>
</
property
>
</
bean
>
|
那就不得不了解一下java.util.concurrent包下Executor构架了 。
如果当前运行的线程少于corePoolSize,则创建新线程来执行任务(需要获得全局锁) 。
如果运行的线程等于或多于corePoolSize ,则将任务加入BlockingQueue 。
如果无法将任务加入BlockingQueue(队列已满),则创建新的线程来处理任务(需要获得全局锁) 。
如果创建新线程将使当前运行的线程超出maxiumPoolSize,任务将被拒绝,并调用 。
RejectedExecutionHandler.rejectedExecution()方法 。
首先,注释queueCapacity的一行 。
任务:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
public
class
CustomRunnable
implements
Runnable {
private
int
id;
public
CustomRunnable(
int
id) {
this
.id = id;
}
@Override
public
void
run() {
try
{
System.out.println(
"begin execute "
+ Thread.currentThread().getName()
+
"-- task id: "
+ id);
String rs = ClientUtil.get(
"http://www.****.com"
);
System.out.println(
"end execute task: "
+ id);
}
catch
(Exception e) {
e.printStackTrace();
}
}
}
|
测试案例:
1
2
3
4
5
6
7
8
|
@Test
public
void
threadTest()
throws
InterruptedException {
for
(
int
i=
0
; i<
35
; i++){
Thread t=
new
Thread(
new
CustomRunnable(i));
executor.execute(t);
}
Thread.sleep(
1800000
);
}
|
测试结果:
七月 09, 2018 5:46:47 下午 org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor initialize 信息: Initializing ExecutorService 'threadPoolTaskExecutor' begin execute threadPoolTaskExecutor-1-- task id: 0 begin execute threadPoolTaskExecutor-2-- task id: 1 begin execute threadPoolTaskExecutor-3-- task id: 2 begin execute threadPoolTaskExecutor-4-- task id: 3 begin execute threadPoolTaskExecutor-5-- task id: 4 end execute task: 4 begin execute threadPoolTaskExecutor-5-- task id: 5 end execute task: 1 begin execute threadPoolTaskExecutor-2-- task id: 6 end execute task: 0 begin execute threadPoolTaskExecutor-1-- task id: 7 end execute task: 2 begin execute threadPoolTaskExecutor-3-- task id: 8 end execute task: 3 begin execute threadPoolTaskExecutor-4-- task id: 9 ... 。
可以发现,一开始线程池就创建了corePoolSize大小的线程,对于之后的新加进的任务,就放到BlockingQueue中,默认是使用LinkedBlockingQueue,大小是Integer.MAX_VALUE,因为队列大小太大,所以就不会创建maxPoolSize大小的线程数量,因此,只有线程处理完当前任务,才会去处理下一个任务,所以,刚加进去的任务得不到立即处理 。
只需要打开queueCapacity的一行,其他不变 。
测试结果:
七月 09, 2018 6:07:13 下午 org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor initialize 信息: Initializing ExecutorService 'threadPoolTaskExecutor' begin execute threadPoolTaskExecutor-1-- task id: 0 begin execute threadPoolTaskExecutor-2-- task id: 1 begin execute threadPoolTaskExecutor-3-- task id: 2 begin execute threadPoolTaskExecutor-4-- task id: 3 begin execute threadPoolTaskExecutor-5-- task id: 4 begin execute threadPoolTaskExecutor-6-- task id: 15 begin execute threadPoolTaskExecutor-7-- task id: 16 begin execute threadPoolTaskExecutor-8-- task id: 17 begin execute threadPoolTaskExecutor-9-- task id: 18 begin execute threadPoolTaskExecutor-10-- task id: 19 begin execute threadPoolTaskExecutor-11-- task id: 20 begin execute threadPoolTaskExecutor-12-- task id: 21 begin execute threadPoolTaskExecutor-14-- task id: 23 begin execute threadPoolTaskExecutor-15-- task id: 24 begin execute main-- task id: 26 begin execute threadPoolTaskExecutor-13-- task id: 22 begin execute threadPoolTaskExecutor-16-- task id: 25 begin execute threadPoolTaskExecutor-11-- task id: 5 end execute task: 15 begin execute threadPoolTaskExecutor-6-- task id: 6 end execute task: 23 begin execute threadPoolTaskExecutor-14-- task id: 7 end execute task: 4 begin execute threadPoolTaskExecutor-5-- task id: 8 end execute task: 17 begin execute threadPoolTaskExecutor-8-- task id: 9 .... 。
可以发现,因为初始任务数量大于corePoolSize大小,所以线程池初始化就创建了maxPoolSize大小数量的纯种,对于后续新加进的任务会入到BlockingQueue队列中去,之后等待线程处理完一个任务之后再处理队列中的任务 。
猜想 。
线上出现这种原因可能就是因为queueCapacity被设置成了默认(Integer.MAX_VALUE),而且初始化纯种的corePoolSize数量过少,并且线程处理速度较慢(业务逻辑,网络请求等等原因),导致后续任务会一直填加到队列中去,迟迟得不到立即处理.
解决方案 。
手动设置queueCapacity大小,网络请求原因的话,可以设置超时时间;业务逻辑的话,另辟蹊径。。.
以上为个人经验,希望能给大家一个参考,也希望大家多多支持我.
原文链接:https://www.cnblogs.com/lcxdevelop/p/10487857.html 。
最后此篇关于基于ThreadPoolTaskExecutor的使用说明的文章就讲到这里了,如果你想了解更多关于基于ThreadPoolTaskExecutor的使用说明的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
我正在查看预先重写的 jQuery 代码。我无法理解以下代码。 $('body > *:not(#print-modal):not(script)').clone(); 最佳答案 此选择器匹配以下任何
所以我开始学习MySQL,我对表有点困惑,所以我想澄清一下。数据库中可以有多个表吗?例如: Database1 -Table1 -Username -Password -Table2 -Name
我在 PostgreSQL 中编写了一个函数,其代码如下: for (i = 0; i str[0][i]); values[i] = datumCopy(dat_value,
oid: 行的对象标识符(对象 ID)。这个字段只有在创建表的时候使用了 WITH OIDS ,或者是设置了default_with_oids 配置参数时出现。 这个字段的类型是 oid (和字段同
我在搜索最大连接设备数时发现了 a post大致说: 当使用 P2P_STAR 时,最大设备数量为 10,因为此 topoly 使用 Wi-Fi 热点。也就是说,如果您没有路由器。 这让我问了两个问题
我不明白为什么会这样: Printf.sprintf "%08s" "s" = Printf.sprintf "%8s" "s" - : bool = true 换句话说,我希望: Printf.sp
我正在遵循 Grails in Action 中的示例。我有一个问题,如何理解 addTo*()功能有效。 我有一个简单的域:具有以下关系的用户、帖子、标签: 用户1对M发帖 用户一对一标签 发布 M
请问为什么行 "b[0]= new Child2();"在运行时而不是在编译时失败。请不要检查语法,我只是在这里做了 class Base {} class Child1 : Base {} clas
所以我想进一步加深我对套接字的理解,但是我想首先从最低级别开始(在C语言中,而不是在汇编中大声笑) 但是,我处理的大多数站点都使用SOCK_STREAM或SOCK_DGRAM。但是我已经阅读了Beej
好吧,我对 javascript 语法了解甚少,而且我对 null 的行为感到非常困惑。关于空值有很多讨论,但我似乎无法找出问题所在!请帮我。这是脚本。 var jsonData = '';
关闭。此题需要details or clarity 。目前不接受答案。 想要改进这个问题吗?通过 editing this post 添加详细信息并澄清问题. 已关闭5 年前。 Improve thi
问题: SeriesSum 类旨在计算以下系列的总和: 类名:SeriesSum 数据成员/实例变量: x:存储整数 n:存储术语数量 sum:用于存储系列总和的双变量 成员函数: SeriesSum
关闭。这个问题需要多问focused 。目前不接受答案。 想要改进此问题吗?更新问题,使其仅关注一个问题 editing this post . 已关闭 9 年前。 Improve this ques
今天我在 logcat 中注意到以下内容: D/OpenGLRenderer:0xa2c70600 (CardView) 上的 endAllStagingAnimators,句柄为 0xa2c9d35
如何创建值有序对的列表,例如list1 [(x, y), (x1, y1) ...].?? 学习如何创建此列表后,我需要知道如何将 x 值提供给列表中的用户输入并搜索 x 的下一个值并显示有序对 (x
我在存储过程中有以下逻辑。 这里完成了什么? 如果color为null,替换为'' IF ISNULL(@color, '') <> '' BEGIN END 最佳答案 它等同于: IF (@colo
我知道.Net中的接口(interface)定义了接口(interface)和继承它的类之间的契约。刚刚完成了一个大量使用数据访问层接口(interface)的项目,这让我开始思考。 . .有什么大不
如何防止基类方法被子类覆盖 最佳答案 您不需要做任何特别的事情:默认情况下方法是不可覆盖的。相反,如果您希望该方法可重写,则必须将 virtual 关键字添加到其声明中。 但是请注意,即使方法不可重写
我已阅读以下有关工厂模式的文章 here 请仅引用Class Registration - avoiding reflection这一部分。 这个版本在没有反射的情况下实现了工厂和具体产品之间的减少耦
我正在学习 Java 类(class),但无法完全理解下一课的内容。 目的:本课的目的是通过创建一个模拟 for-each 循环如何工作的替代方案来解释 for-each 循环的工作方式。 在上一课中
我是一名优秀的程序员,十分优秀!