CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章什么?用@Async会内存溢出?看看你的线程池配置了没!由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
上一篇我们介绍了如何使用@Async注解来创建异步任务,我可以用这种方法来实现一些并发操作,以加速任务的执行效率。但是,如果只是如前文那样直接简单的创建来使用,可能还是会碰到一些问题。存在有什么问题呢?先来思考下,下面的这个接口,通过异步任务加速执行的实现,是否存在问题或风险呢?
- @RestController
- publicclassHelloController{
-
- @Autowired
- privateAsyncTasksasyncTasks;
-
- @GetMapping("/hello")
- publicStringhello(){
- //将可以并行的处理逻辑,拆分成三个异步任务同时执行
- CompletableFuture
task1=asyncTasks.doTaskOne();
- CompletableFuture
task2=asyncTasks.doTaskTwo();
- CompletableFuture
task3=asyncTasks.doTaskThree();
-
- CompletableFuture.allOf(task1,task2,task3).join();
- return"HelloWorld";
- }
- }
虽然,从单次接口调用来说,是没有问题的。但当接口被客户端频繁调用的时候,异步任务的数量就会大量增长:3 x n(n为请求数量),如果任务处理不够快,就很可能会出现内存溢出的情况。那么为什么会内存溢出呢?根本原因是由于Spring Boot默认用于异步任务的线程池是这样配置的:
图中我标出的两个重要参数是需要关注的:
- queueCapacity:缓冲队列的容量,默认为INT的最大值(2的31次方-1)。
- maxSize:允许的最大线程数,默认为INT的最大值(2的31次方-1)。
所以,默认情况下,一般任务队列就可能把内存给堆满了。所以,我们真正使用的时候,还需要对异步任务的执行线程池做一些基础配置,以防止出现内存溢出导致服务不可用的问题.
配置默认线程池 。
默认线程池的配置很简单,只需要在配置文件中完成即可,主要有以下这些参数:
- spring.task.execution.pool.core-size=2
- spring.task.execution.pool.max-size=5
- spring.task.execution.pool.queue-capacity=10
- spring.task.execution.pool.keep-alive=60s
- spring.task.execution.pool.allow-core-thread-timeout=true
- spring.task.execution.shutdown.await-termination=false
- spring.task.execution.shutdown.await-termination-period=
- spring.task.execution.thread-name-prefix=task-
具体配置含义如下:
- spring.task.execution.pool.core-size:线程池创建时的初始化线程数,默认为8
- spring.task.execution.pool.max-size:线程池的最大线程数,默认为int最大值
- spring.task.execution.pool.queue-capacity:用来缓冲执行任务的队列,默认为int最大值
- spring.task.execution.pool.keep-alive:线程终止前允许保持空闲的时间
- spring.task.execution.pool.allow-core-thread-timeout:是否允许核心线程超时
- spring.task.execution.shutdown.await-termination:是否等待剩余任务完成后才关闭应用
- spring.task.execution.shutdown.await-termination-period:等待剩余任务完成的最大时间
- spring.task.execution.thread-name-prefix:线程名的前缀,设置好了之后可以方便我们在日志中查看处理任务所在的线程池
动手试一试
我们直接基于之前chapter7-5的结果来进行如下操作.
首先,在没有进行线程池配置之前,可以先执行一下单元测试:
- @Test
- publicvoidtest1()throwsException{
- longstart=System.currentTimeMillis();
-
- CompletableFuture
task1=asyncTasks.doTaskOne();
- CompletableFuture
task2=asyncTasks.doTaskTwo();
- CompletableFuture
task3=asyncTasks.doTaskThree();
-
- CompletableFuture.allOf(task1,task2,task3).join();
-
- longend=System.currentTimeMillis();
-
- log.info("任务全部完成,总耗时:"+(end-start)+"毫秒");
- }
由于默认线程池的核心线程数是8,所以3个任务会同时开始执行,日志输出是这样的:
- 2021-09-1500:30:14.819INFO77614
- 2021-09-1500:30:14.819INFO77614
- 2021-09-1500:30:14.819INFO77614
- 2021-09-1500:30:15.491INFO77614
- 2021-09-1500:30:19.496INFO77614
- 2021-09-1500:30:20.443INFO77614
- 2021-09-1500:30:20.443INFO77614
接着,可以尝试在配置文件中增加如下的线程池配置 。
- spring.task.execution.pool.core-size=2
- spring.task.execution.pool.max-size=5
- spring.task.execution.pool.queue-capacity=10
- spring.task.execution.pool.keep-alive=60s
- spring.task.execution.pool.allow-core-thread-timeout=true
- spring.task.execution.thread-name-prefix=task-
日志输出的顺序会变成如下的顺序:
- 2021-09-1500:31:50.013INFO77985
- 2021-09-1500:31:50.013INFO77985
- 2021-09-1500:31:52.452INFO77985
- 2021-09-1500:31:52.452INFO77985
- 2021-09-1500:31:55.880INFO77985
- 2021-09-1500:32:00.346INFO77985
- 2021-09-1500:32:00.347INFO77985
- 任务一和任务二会马上占用核心线程,任务三进入队列等待
- 任务一完成,释放出一个核心线程,任务三从队列中移出,并占用核心线程开始处理
注意:这里可能有的小伙伴会问,最大线程不是5么,为什么任务三是进缓冲队列,不是创建新线程来处理吗?这里要理解缓冲队列与最大线程间的关系:只有在缓冲队列满了之后才会申请超过核心线程数的线程来进行处理。所以,这里只有缓冲队列中10个任务满了,再来第11个任务的时候,才会在线程池中创建第三个线程来处理。这个这里就不具体写列子了,读者可以自己调整下参数,或者调整下单元测试来验证这个逻辑.
原文链接:https://mp.weixin.qq.com/s/1LgXMWS26vJvfakrA24rNg 。
最后此篇关于什么?用@Async会内存溢出?看看你的线程池配置了没!的文章就讲到这里了,如果你想了解更多关于什么?用@Async会内存溢出?看看你的线程池配置了没!的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
我是一名优秀的程序员,十分优秀!