首页 技术 正文
技术 2022年11月7日
0 收藏 398 点赞 795 浏览 7640 个字

一,为什么要使用async异步线程池?

1,在生产环境中,有一些需要延时处理的业务场景:

例如:发送电子邮件,

给手机发短信验证码

大数据量的查询统计

远程抓取数据等

这些场景占用时间较长,而用户又没有必须立刻得到返回数据的需求,

我们如果让用户占用到服务器的连接长时间等待也没有必要,

这时异步处理是优先选择。

2,使用线程池的好处?

第一,提高资源利用率:可以重复利用已经创建了的线程

第二,提高响应速度:如果有线程处于等待分配任务状态时,则任务到来时无需创建线程就能被执行

第三,具有可管理性:线程池能减少创建和销毁线程带来的系统开销

说明:刘宏缔的架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/architectforest

对应的源码可以访问这里获取: https://github.com/liuhongdi/

说明:作者:刘宏缔 邮箱: 371125307@qq.com

二,演示项目的相关信息

1,项目地址:

https://github.com/liuhongdi/asyncmail

2,项目的说明:

regmail:演示异步发送一封注册成功的邮件

sleep:同步执行sleep1秒

asyncsleep:演示异步执行十个各sleep1秒的线程

3,项目的结构,如图:

三,演示项目的配置文件说明:

1,pom.xml

        <!--mail begin-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-mail</artifactId>
</dependency>
<!--mail end--> <!--thymeleaf begin-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-thymeleaf</artifactId>
</dependency>
<!--thymeleaf end-->

引入mail和thymeleaf两个依赖,其中thymeleaf是作为html格式邮件内容的模板

2,application.properties

spring.mail.host=smtp.163.com
spring.mail.username=demouser@163.com
spring.mail.password=demopassword
spring.mail.default-encoding=UTF-8
spring.mail.protocol=smtps
spring.mail.port=465
spring.mail.properties.mail.smtp.auth=true
spring.mail.properties.mail.smtp.starttls.enable=true
spring.mail.properties.mail.smtp.starttls.required=true

说明:此处注意:如果是在阿里云ecs上运行,

不要使用25的smtp端口,要使用带ssl的smtps,端口是465

另外:这里配置的password,是邮箱的授权码,不是登录密码,

有疑问可以参见这一篇:

https://www.cnblogs.com/architectforest/p/12924395.html

四,java代码说明:

1,AsyncConfig.java

//线程池的配置
@Configuration
@EnableAsync
public class AsyncConfig { @Bean(name = "taskExecutor")
public ThreadPoolTaskExecutor taskExecutor() {
ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
// 设置核心线程数,它是可以同时被执行的线程数量
executor.setCorePoolSize(5);
// 设置最大线程数,缓冲队列满了之后会申请超过核心线程数的线程
executor.setMaxPoolSize(10);
// 设置缓冲队列容量,
executor.setQueueCapacity(20);
// 设置线程生存时间(秒),当超过了核心线程出之外的线程在生存时间到达之后会被销毁
executor.setKeepAliveSeconds(60);
// 设置线程名称前缀
executor.setThreadNamePrefix("threadpool-");
// 设置拒绝策略
executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
// 等待所有任务结束后再关闭线程池
executor.setWaitForTasksToCompleteOnShutdown(true);
//初始化
executor.initialize();
return executor;
}
}

说明:线程池的配置文件,

这个有个问题:核心线程数设置为多少为宜?

设N为cpu的核心数量,则

如果是CPU密集型应用,则线程池大小设置为N+1

如果是IO密集型应用,则线程池大小设置为2N+1

这个是常用的一个设置参考,具体是否适用自己的业务还要在生产环境中观察

但可以确认的是:线程数不是越多越好,因为所在机器上的cpu等硬件并没有变化,

异步也只是提高吞吐量,并不能加快任务的执行

2,MailUtil.java

@Component
public class MailUtil { @Resource
private JavaMailSender javaMailSender; @Resource
TemplateEngine templateEngine; //发送html内容的邮件,使用thymeleaf渲染页面
public void sendHtmlMail(String from, String[] to, String[] cc, String[] bcc, String subject, String templateName, HashMap<String,String> content) throws MessagingException {
MimeMessage mimeMessage = javaMailSender.createMimeMessage();
MimeMessageHelper helper = new MimeMessageHelper(mimeMessage, true);
helper.setSubject(subject);
helper.setFrom(from);
helper.setTo(to);
//抄送,收到邮件用户可以看到其他收件人
if (cc != null && cc.length > 0) {
helper.setCc(cc);
}
//密送 收到邮件用户看不到其他收件人
if (bcc != null && bcc.length > 0) {
helper.setBcc(bcc);
}
helper.setSentDate(new Date());
//生成邮件模板上的内容
Context context = new Context();
if (content != null && content.size() > 0) {
for (String key : content.keySet()) {
context.setVariable(key, content.get(key));
}
}
String process = templateEngine.process(templateName, context);
helper.setText(process,true);
javaMailSender.send(mimeMessage);
}
}

说明:功能是发送html内容的邮件,所以用到了templateEngine

3,邮件内容:regmail.html

<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<title>Title</title>
</head>
<body>
<h1>您好,注册成功! 以下是您在本网站的注册信息:</h1>
<table border="1">
<tr>
<td>用户名</td>
<td th:text="${username}">${username}</td>
</tr>
<tr>
<td>昵称</td>
<td th:text="${nickname}">${nickname}</td>
</tr>
<tr>
<td>ID</td>
<td th:text="${id}">${id}</td>
</tr>
</table>
<div style="color: #ff1a0e">本站网址:http://springio.com</div>
</body>
</html>

4,MailServiceImpl.java

@Service
public class MailServiceImpl implements MailService { @Resource
private MailUtil mailUtil; //异步发送html格式的邮件
@Async
@Override
public void sendHtmlMail() {
String from = "demouser@163.com";
String[] to = {"371125307@qq.com"};
String subject = "恭喜您成功注册老刘代码库网站";
HashMap<String,String> content= new HashMap<String,String>();
content.put("username","laoliu");
content.put("nickname","老刘");
content.put("id","0000001");
String templateName= "mail/regmail.html";
try {
mailUtil.sendHtmlMail(from, to, null, null, subject, templateName, content);
} catch (MessagingException e) {
e.printStackTrace();
System.out.println("邮件发送出错");
}
}
}

功能:生成邮件的内容,注意这里指定的模板文件和模板上的变量

5,SlowServiceImpl.java

@Service
public class SlowServiceImpl implements SlowService { private static Logger log= LoggerFactory.getLogger(SlowServiceImpl.class); //sleep 1秒
@Override
public void sleepawhile(){
long startTime = System.currentTimeMillis();
log.info("function sleep begin");
try {
Thread.sleep(1000); //延时1秒
}
catch(InterruptedException e) {
e.printStackTrace();
}
log.info("function sleep end");
} //sleep 1秒,异步执行,并返回一个统计用的字串
@Async
@Override
public Future<String> asyncsleepawhile(int i){
log.info("async function sleep begin");
String start=TimeUtil.getMilliTimeNow();
try {
Thread.sleep(1000); //延时1秒
}
catch(InterruptedException e) {
e.printStackTrace();
}
log.info("async function sleep end");
String end=TimeUtil.getMilliTimeNow();
return new AsyncResult<>(String.format("第{%s}个异步调用asyncsleepawhile方法:开始时间:%s,结束时间:%s", i,start,end));
}
}

仅供演示用,两个方法:一个同步sleep,一个异步sleep

6,HomeController.java

@RequestMapping("/home")
@Controller
public class HomeController { private static Logger log= LoggerFactory.getLogger(HomeController.class); @Resource
private MailService mailService; @Resource
private SlowService slowService; //异步发送一封注册成功的邮件
@GetMapping("/regmail")
@ResponseBody
public String regMail(ModelMap modelMap) {
mailService.sendHtmlMail();
return "mail sended";
} //同步sleep1秒
@GetMapping("/sleep")
@ResponseBody
public String sleep() {
System.out.println(TimeUtil.getMilliTimeNow()+" controller begin");
slowService.sleepawhile();
System.out.println(TimeUtil.getMilliTimeNow()+" controller end");
return "mail sended";
} //异步执行sleep1秒10次
@GetMapping("/asyncsleep")
@ResponseBody
public Map<String, Object> asyncsleep() throws ExecutionException, InterruptedException { long start = System.currentTimeMillis();
Map<String, Object> map = new HashMap<>();
List<Future<String>> futures = new ArrayList<>();
for (int i = 0; i < 10; i++) {
Future<String> future = slowService.asyncsleepawhile(i);
futures.add(future);
}
List<String> response = new ArrayList<>();
for (Future future : futures) {
String string = (String) future.get();
response.add(string);
}
map.put("data", response);
map.put("消耗时间", String.format("任务执行成功,耗时{%s}毫秒", System.currentTimeMillis() - start));
return map;
}
}

五,效果测试:

1,发送注册邮件:

访问:

http://127.0.0.1:8080/home/regmail

收到邮件:

2,测试异步线程池:

访问:

http://127.0.0.1:8080/home/asyncsleep

查看输出:

{"data":["第{0}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:10.937,结束时间:2020-07-27 17:10:11.941",
"第{1}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:10.937,结束时间:2020-07-27 17:10:11.945",
"第{2}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:10.939,结束时间:2020-07-27 17:10:11.940",
"第{3}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:10.938,结束时间:2020-07-27 17:10:11.940",
"第{4}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:10.939,结束时间:2020-07-27 17:10:11.941",
"第{5}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:11.943,结束时间:2020-07-27 17:10:12.944",
"第{6}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:11.944,结束时间:2020-07-27 17:10:12.944",
"第{7}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:11.944,结束时间:2020-07-27 17:10:12.945",
"第{8}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:11.945,结束时间:2020-07-27 17:10:12.946",
"第{9}个异步调用asyncsleepawhile方法:开始时间:2020-07-27 17:10:11.946,结束时间:2020-07-27 17:10:12.946"],
"消耗时间":"任务执行成功,耗时{2023}毫秒"}

这里大家注意思考一下,每个线程sleep了一秒,

我们启用了10个线程,为什么用的时间是2秒?

原因在于我们对线程池中核心线程数量的设置:可以并发执行5个线程,

所以10个线程共执行了两次,每次5个,每次都是1秒,两次用时2秒

六,查看spring boot版本:

  .   ____          _            __ _ _
/\\ / ___'_ __ _ _(_)_ __ __ _ \ \ \ \
( ( )\___ | '_ | '_| | '_ \/ _` | \ \ \ \
\\/ ___)| |_)| | | | | || (_| | ) ) ) )
' |____| .__|_| |_|_| |_\__, | / / / /
=========|_|==============|___/=/_/_/_/
:: Spring Boot :: (v2.3.1.RELEASE)
相关推荐
python开发_常用的python模块及安装方法
adodb:我们领导推荐的数据库连接组件bsddb3:BerkeleyDB的连接组件Cheetah-1.0:我比较喜欢这个版本的cheeta…
日期:2022-11-24 点赞:878 阅读:9,104
Educational Codeforces Round 11 C. Hard Process 二分
C. Hard Process题目连接:http://www.codeforces.com/contest/660/problem/CDes…
日期:2022-11-24 点赞:807 阅读:5,580
下载Ubuntn 17.04 内核源代码
zengkefu@server1:/usr/src$ uname -aLinux server1 4.10.0-19-generic #21…
日期:2022-11-24 点赞:569 阅读:6,428
可用Active Desktop Calendar V7.86 注册码序列号
可用Active Desktop Calendar V7.86 注册码序列号Name: www.greendown.cn Code: &nb…
日期:2022-11-24 点赞:733 阅读:6,200
Android调用系统相机、自定义相机、处理大图片
Android调用系统相机和自定义相机实例本博文主要是介绍了android上使用相机进行拍照并显示的两种方式,并且由于涉及到要把拍到的照片显…
日期:2022-11-24 点赞:512 阅读:7,835
Struts的使用
一、Struts2的获取  Struts的官方网站为:http://struts.apache.org/  下载完Struts2的jar包,…
日期:2022-11-24 点赞:671 阅读:4,918