ExecutorService小试牛刀
现在的项目中有将学生批量加入课程的需求,于是想根据这个需求测试一下ExecutorService的效率。假设一个场景:现在有100门课,1500名学生,要求每15个人加入一门课程,不重复。
查询并拼接数据:先从mysql中查询出100门课的id,再拿出1500个学生,然后将1500个学生每15人一组,分成100组,对应100门课程,方法如下:
-
public List<List<MessagePojo>> getGroupStudent(){
-
List<Long> courseIds = addUserMapper.find100CourseIds();//拿出100门课的id List
-
List<MessagePojo> students = addUserMapper.find1500students(); //拿出1500个学生 List
-
-
List<List<MessagePojo>> groupStudent = new ArrayList<>();
-
-
//对学生分组 没15个学生一组 供100组
-
if(students!=null&&students.size()>0){
-
int maxPoint = 15;
-
int part = students.size()/maxPoint;
-
System.out.println("共有 : "+students.size()+"条,!"+" 分为 :"+part+"批,!"+" 每批 :"+maxPoint+"个");
-
for(int i = 1;i <=part ;i++){
-
List<MessagePojo> temp = students.subList(maxPoint*(i-1),maxPoint*i);
-
System.out.println(i);
-
groupStudent.add(temp);
-
}
-
}
-
for (int i=0;i<100;i++) {
-
List<MessagePojo> temp = groupStudent.get(i);
-
for (MessagePojo messagePojo : temp) {
-
messagePojo.setCourseId(courseIds.get(i));
-
}
-
}
-
return groupStudent;
-
}
下面这个是不使用executorSevice的插入方法,为了体现出时间差距,总共有三个逻辑比较复杂的方法,因为涉及项目结果,这里就不贴出细则了:
-
public int doAdd(List<List<MessagePojo>> list){
-
for (List<MessagePojo> messagePojos : list) {
-
if (messagePojos.size()>0) {
-
//学生和课程关系表中加入数据
-
addUserMapper.method1(messagePojos);
-
//初始化学生信息到总成绩表
-
method2(messagePojos);
-
//spoc课程表中加入学生信息(json)
-
List<MessagePojo> classes = method3(messagePojos.get(0).getCourseId(),"save");
-
}
-
}
-
return 1;
-
}
下面这个是使用了ExecutorService的插入方法:
-
public int doAddByExecutor(List<List<MessagePojo>> list){
-
ExecutorService executorService = Executors.newFixedThreadPool(list.size());
-
try{
-
for (List<MessagePojo> messagePojos : list) {
-
executorService.submit(() ->{
-
//学生和课程关系表中加入数据
-
addUserMapper.method1(messagePojos);
-
//初始化学生信息到总成绩表
-
method2(messagePojos);
-
//spoc课程表中加入学生信息(json)
-
List<MessagePojo> classes = method3(messagePojos.get(0).getCourseId(),"save");
-
});
-
}
-
}catch(Exception e){
-
e.printStackTrace();
-
}finally {
-
executorService.shutdownNow();
-
}
-
return 1;
-
}
首先使用Executors类的静态方法newFixedThreadPool(int size)创建了线程池,其大小为list.size(),其实这里就是100,因为将学生分成了100组。然后使用executorService的submit方法执行任务,其中传入的是一个Runnable的实例,这里使用了Lambda表达式。必须要注意的是,submit方法一定要try,否则容易造成死锁,并且执行完成之后一定要shutdown掉。
我这里写了两个简单的方法,测试了一下两种插入方法的效率:
首先是普通方法:耗时2秒左右
然后是多线程方法:耗时33毫秒。
这个数据量其实不算很大,但是用多线程来跑还是能看出来耗时差距的。试想一下,如果数据量翻十倍甚至百倍万倍的时候,效率差距就出来了。
这只是ExecutorService最简单的用法。了解一下源码,先看最重要的submit方法,其中有三个重载:
Future<?> submit(Runnable task);
<T> Future<T> submit(Runnable task, T result);
<T> Future<T> submit(Callable<T> task);
submit()方法可以接受Runnable和Callable对象,返回Future对象。
再看execute方法:
void execute(Runnable command);
execute是Executor接口的方法,而ExecutorService继承自Executor。executor方法只能接受Runnable对象,没有返回值。
再来看一下ExecutorService的关闭。
void shutdown();
List<Runnable> shutdownNow();
二者的区别在于,shoudown()方法在终止前允许执行以前提交的任务,而shoutdownNow()方法阻止等待任务启动并试图停止当前正在执行的任务。通俗一点讲,shutdown()方法只是将线程池的状态设置为SHUTDOWN状态,正在执行的任务会继续执行下去,没有被执行的则不能在执行。而shutdownNow()方法则是将线程池的状态设置为STOP,正在执行的任务则被停止,没被执行的任务则返回。举一个很经典的猴子(各个线程)吃玉米(任务)的例子,假如猴子们正在非常开心的吃玉米,突然接到shutdown指令,那么猴子们则会把手上的玉米吃完,没有拿到手里的地上的玉米则不能再吃。而如果接到shutdownNow指令,这些猴子们立即停止吃玉米,手上的玉米也要放下,地上的更不能吃。(当然,假设猴子是听话的)
一般情况下,分两个阶段来关闭ExecutorService。首先调用shutdown()方法拒绝传入新任务。其次,如果有必要的话再调用shutdownNow方法取消所有遗留的任务。
上面讲到了,submit方法可以接受Runnable和Callable,这里讲一下这两者之间的区别。
我们都知道Runnbale接口只有一个run()方法,并且没有返回值。比如上面插入学生的操作,Lambda中写的代码并不关心返回值,所以这里使用Runnable就可以。但是如果我们需要关注任务线程的返回结果,就要使用Callable了,比如下面这段代码:
-
TaskWork taskwork = new TaskWork();
-
Future<RetureData> future = executorService.submit(taskwork);
其中TaskWork类实现了Callable接口,重写call方法。
-
public class TaskWork implements Callable<ReturnData>{
-
@Override
-
public ReturnData call(){
-
ReturnData returnData = new ReturnData();
-
-
//todo
-
return returnData;
-
}
-
}
Callable接口有一个泛型,实现时可以随意指定,并且call方法的返回值就是该泛型。在executorService.submit(taskwork)之后,会返回Future的实例,其中的泛型和Callable中的一致。然后通过Future的get方法可以获取返回的具体对象:
RetureData returnData = future.get();
原文地址:https://blog.csdn.net/hz_940611/article/details/81119764
ExecutorService小试牛刀的更多相关文章
- Xamarin+Prism小试牛刀:定制跨平台Outlook邮箱应用(后续)
在[Xamarin+Prism小试牛刀:定制跨平台Outlook邮箱应用]里面提到了Microsoft 身份认证,其实这也是一大块需要注意的地方,特作为后续补充这些知识点.上章是使用了Microsof ...
- Android线程管理之ExecutorService线程池
前言: 上篇学习了线程Thread的使用,今天来学习一下线程池ExecutorService. 线程管理相关文章地址: Android线程管理之Thread使用总结 Android线程管理之Execu ...
- ExecutorService线程池
ExecutorService 建立多线程的步骤: 1.定义线程类 class Handler implements Runnable{} 2.建立ExecutorService线程池 Executo ...
- ExecutorService中submit()和execute()的区别
在使用java.util.concurrent下关于线程池一些类的时候,相信很多人和我一样,总是分不清submit()和execute()的区别,今天从源码方面分析总结一下. 通常,我们通过Execu ...
- ExecutorService与ThreadPoolTaskExecutor
1.ExecutorService private static ExecutorService exec = null; public static ExecutorService getExecu ...
- Java批处理ExecutorService/CompletionService
服务端接收一个请求,常常需要同时进行几个计算或者向其他服务发送请求,最后拼装结果返回上游.本文就来看下JDK提供几个并行处理方案,牵涉到ExcecutorService/CompletionServi ...
- ExecutorService线程池应用
//线程数量 int threadNum = lists.size(); //创建一个线程池 ExecutorService pool = Executors.newFixedThreadPool(t ...
- Handler+ExecutorService(线程池)+MessageQueue模式+缓存模式
android线程池的理解,晚上在家无事 预习了一下android异步加载的例子,也学习到了一个很重要的东东 那就是线程池+缓存 下面看他们的理解.[size=1.8em]Handler+Runna ...
- 线程池ExecutorService
说到java开发,免不了跟多线程打交道.Executor框架便是Java 5中引入的,其内部使用了线程池机制,它在java.util.cocurrent 包下,通过该框架来控制线程的启动.执行和关闭, ...
随机推荐
- 20190927 - 28 后觉 「雅礼Day3 - 4」
我再不开$C++11$编译我就从三楼跳下去$$\text{%%%lsc}$$ Day3 -lm -O2 -std=c++ Before $Day3$? 全是$Subtask$? $\frac{1}{4 ...
- 详解PPP模式下的产业投资基金运作【基金管理】
详解PPP模式下的产业投资基金运作[基金管理] 点击标题下「搏实资本」可快速关注 搏实资本 研究型的投资机构,实操型的专家团队 ﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌﹌ 一.产业投资基金概述 ...
- 【springmvc学习】常用注解总结
@Controller 在springmvc中,我们用它来告诉前端控制器,他这个类是controller,也就是springmvc的一个对象了,我们在spring.xml配置文件中用<conte ...
- CSS Reset(CSS重置)
CSS Reset是指重设浏览器的样式.在各种浏览器中,都会对CSS的选择器默认一些数值,譬如当h1没有被设置数值时,显示一定大小. 但并不是所有的浏览器都使用一样的数值,所以有了CSS Reset, ...
- CentOS 7 yum 安装与配置MySQL5.7
1.下载mysql源安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm 2.安装mysql源 yu ...
- java-io流入门
一 概述 已学习过的API常见对象解决的问题: 字符串String--操作文本数据.字符串缓冲区---容器,可以存储很多的任意类型的数据--字符串. 基本数据类型包装类---解决了字符串和基本数据类型 ...
- python 全局种子与局部种子
- 【洛谷】【USACO】P1118 数字三角形
题目描述 FJ and his cows enjoy playing a mental game. They write down the numbers from 1 to N (1 <= N ...
- 威胁快报|Nexus Repository Manager 3新漏洞已被用于挖矿木马传播,建议用户尽快修复
背景 近日,阿里云安全监测到watchbog挖矿木马使用新曝光的Nexus Repository Manager 3远程代码执行漏洞(CVE-2019-7238)进行攻击并挖矿的事件. 值得注意的是, ...
- Django快速创建新项目
Python免费视频含配套文件QQ124111294 https://pan.baidu.com/s/1bL5ml4 python.exe manage.py startapp app01 pytho ...