解决方式:使用线程池+队列

项目基于Spring,如果不用spring需要自己把

  1. ThreadPoolManager.java

改成单例模式

1.写一个Controller(Spring mvc)

  1. /**
  2. * @author HeyS1
  3. * @date 2016/12/1
  4. * @description
  5. */
  6. @Controller
  7. public class ThreadPoolController {
  8. @Autowired
  9. ThreadPoolManager tpm;
  10.  
  11. @RequestMapping("/pool")
  12. public
  13. @ResponseBody
  14. Object test() {
  15. for (int i = 0; i < 500; i++) {
  16.   //模拟并发500条记录
  17. tpm.processOrders(Integer.toString(i));
  18. }
  19.  
  20. return "ok";
  21. }
  22. }

2.线程池管理

  1. /**
  2. * @author HeyS1
  3. * @date 2016/12/1
  4. * @description threadPool订单线程池, 处理订单
  5. * scheduler 调度线程池 用于处理订单线程池由于超出线程范围和队列容量而不能处理的订单
  6. */
  7. @Component
  8. public class ThreadPoolManager implements BeanFactoryAware {
  9. private static Logger log = LoggerFactory.getLogger(ThreadPoolManager.class);
  10. private BeanFactory factory;//用于从IOC里取对象
  11. // 线程池维护线程的最少数量
  12. private final static int CORE_POOL_SIZE = 2;
  13. // 线程池维护线程的最大数量
  14. private final static int MAX_POOL_SIZE = 10;
  15. // 线程池维护线程所允许的空闲时间
  16. private final static int KEEP_ALIVE_TIME = 0;
  17. // 线程池所使用的缓冲队列大小
  18. private final static int WORK_QUEUE_SIZE = 50;
  19. // 消息缓冲队列
  20. Queue<Object> msgQueue = new LinkedList<Object>();
  21.  
  22. //用于储存在队列中的订单,防止重复提交
  23. Map<String, Object> cacheMap = new ConcurrentHashMap<>();
  24.  
  25. //由于超出线程范围和队列容量而使执行被阻塞时所使用的处理程序
  26. final RejectedExecutionHandler handler = new RejectedExecutionHandler() {
  27. @Override
  28. public void rejectedExecution(Runnable r, ThreadPoolExecutor executor) {
  29. //System.out.println("太忙了,把该订单交给调度线程池逐一处理" + ((DBThread) r).getMsg());
  30. msgQueue.offer(((DBThread) r).getMsg());
  31. }
  32. };
  33.  
  34. // 订单线程池
  35. final ThreadPoolExecutor threadPool = new ThreadPoolExecutor(
  36. CORE_POOL_SIZE, MAX_POOL_SIZE, KEEP_ALIVE_TIME,
  37. TimeUnit.SECONDS, new ArrayBlockingQueue(WORK_QUEUE_SIZE), this.handler);
  38.  
  39. // 调度线程池。此线程池支持定时以及周期性执行任务的需求。
  40. final ScheduledExecutorService scheduler = Executors.newScheduledThreadPool(5);
  41.  
  42. // 访问消息缓存的调度线程,每秒执行一次
  43. // 查看是否有待定请求,如果有,则创建一个新的AccessDBThread,并添加到线程池中
  44. final ScheduledFuture taskHandler = scheduler.scheduleAtFixedRate(new Runnable() {
  45. @Override
  46. public void run() {
  47. if (!msgQueue.isEmpty()) {
  48. if (threadPool.getQueue().size() < WORK_QUEUE_SIZE) {
  49. System.out.print("调度:");
  50. String orderId = (String) msgQueue.poll();
  51. DBThread accessDBThread = (DBThread) factory.getBean("dBThread");
  52. accessDBThread.setMsg(orderId);
  53. threadPool.execute(accessDBThread);
  54. }
  55. // while (msgQueue.peek() != null) {
  56. // }
  57. }
  58. }
  59. }, 0, 1, TimeUnit.SECONDS);
  60.  
  61. //终止订单线程池+调度线程池
  62. public void shutdown() {
  63. //true表示如果定时任务在执行,立即中止,false则等待任务结束后再停止
  64. System.out.println(taskHandler.cancel(false));
  65. scheduler.shutdown();
  66. threadPool.shutdown();
  67. }
  68.  
  69. public Queue<Object> getMsgQueue() {
  70. return msgQueue;
  71. }
  72.  
  73. //将任务加入订单线程池
  74. public void processOrders(String orderId) {
  75. if (cacheMap.get(orderId) == null) {
  76. cacheMap.put(orderId,new Object());
  77. DBThread accessDBThread = (DBThread) factory.getBean("dBThread");
  78. accessDBThread.setMsg(orderId);
  79. threadPool.execute(accessDBThread);
  80. }
  81. }
  82.  
  83. //BeanFactoryAware
  84. @Override
  85. public void setBeanFactory(BeanFactory beanFactory) throws BeansException {
  86. factory = beanFactory;
  87. }
  88. }

3.线程池中工作的线程

  1. //线程池中工作的线程
  2. @Component
  3. @Scope("prototype")//spring 多例
  4. public class DBThread implements Runnable {
  5. private String msg;
  6. private Logger log = LoggerFactory.getLogger(DBThread.class);
  7.  
  8. @Autowired
  9. SystemLogService systemLogService;
  10.  
  11. @Override
  12. public void run() {
  13. //模拟在数据库插入数据
  14. Systemlog systemlog = new Systemlog();
  15. systemlog.setTime(new Date());
  16. systemlog.setLogdescribe(msg);
  17. //systemLogService.insert(systemlog);
  18. log.info("insert->" + msg);
  19. }
  20.  
  21. public String getMsg() {
  22. return msg;
  23. }
  24.  
  25. public void setMsg(String msg) {
  26. this.msg = msg;
  27. }
  28. }

浏览器输入地址127.0.0.1/pool

几秒后关闭tomcat。

模拟500条数据,订单线程池处理了117条。调度线程池处理5条

关闭tomcat,后还有378条未处理(这里的实现需要用到spring监听器)。加起来一共500

OK。完毕

spring监听器,监听tomcat关闭事件:

  1. public class MyApplicationListener implements ApplicationListener<ApplicationEvent> {
  2.  
  3. @Autowired
  4. ThreadPoolManager threadPoolManager;
  5.  
  6. @Override
  7. public void onApplicationEvent(ApplicationEvent event) {
  8.  
  9. if (event instanceof ContextClosedEvent) {
  10. XmlWebApplicationContext x = (XmlWebApplicationContext) event.getSource();
  11. //防止执行两次。root application context 没有parent,他就是老大
  12. if (x.getDisplayName().equals("Root WebApplicationContext")) {
  13. threadPoolManager.shutdown();
  14. Queue q = threadPoolManager.getMsgQueue();
  15. System.out.println("关闭了服务器,还有未处理的信息条数:" + q.size());
  16. }
  17.  
  18. } else if (event instanceof ContextRefreshedEvent) {
  19. // System.out.println(event.getClass().getSimpleName()+" 事件已发生!");
  20. } else if (event instanceof ContextStartedEvent) {
  21. // System.out.println(event.getClass().getSimpleName()+" 事件已发生!");
  22. } else if (event instanceof ContextStoppedEvent) {
  23. // System.out.println(event.getClass().getSimpleName()+" 事件已发生!");
  24. } else {
  25. // System.out.println("有其它事件发生:"+event.getClass().getName());
  26. }
  27. }
  28. }

spring配置一下

  1. <bean id="springStartListener" class="com.temp.MyApplicationListener"></bean>

javaWeb 使用线程池+队列解决"订单并发"问题的更多相关文章

  1. 线程池 队列 synchronized

    线程池 BlockingQueue synchronized volatile 本章从线程池到阻塞队列BlockingQueue.从BlockingQueue到synchronized 和 volat ...

  2. 基于Django的乐观锁与悲观锁解决订单并发问题的一点浅见

    订单并发这个问题我想大家都是有一定认识的,这里我说一下我的一些浅见,我会尽可能的让大家了解如何解决这类问题. 在解释如何解决订单并发问题之前,需要先了解一下什么是数据库的事务.(我用的是mysql数据 ...

  3. 使用线程池测试cpu的并发计算能力

    接到一个需求是测试一下cpu并发计算能力,针对int和float求和单位时间能执行几次的问题.可能是服务器选型用到的参数. 开始使用的是fork-join,但是发现fork-join每次得到的结果值波 ...

  4. 【重学Java】多线程进阶(线程池、原子性、并发工具类)

    线程池 线程状态介绍 当线程被创建并启动以后,它既不是一启动就进入了执行状态,也不是一直处于执行状态.线程对象在不同的时期有不同的状态.那么Java中的线程存在哪几种状态呢?Java中的线程 状态被定 ...

  5. Java线程池队列吃的太饱,撑着了咋整?java 队列过大导致内存溢出

    Java的Executors框架提供的定长线程池内部默认使用LinkedBlockingQueue作为任务的容器,这个队列是没有限定大小的,可以无限向里面submit任务. 当线程池处理的太慢的时候, ...

  6. 踩坑 Spring Cloud Hystrix 线程池队列配置

    背景: 有一次在生产环境,突然出现了很多笔还款单被挂起,后来排查原因,发现是内部系统调用时出现了Hystrix调用异常.在开发过程中,因为核心线程数设置的比较大,没有出现这种异常.放到了测试环境,偶尔 ...

  7. Redis分布式队列解决文件并发的问题

    1.首先将捕获的异常写到Redis的队列中 public class MyExceptionAttribute : HandleErrorAttribute { public static IRedi ...

  8. 自定义ThreadPoolExecutor带Queue缓冲队列的线程池 + JMeter模拟并发下单请求

    .原文:https://blog.csdn.net/u011677147/article/details/80271174 拓展: https://github.com/jwpttcg66/GameT ...

  9. Java并发编程-并发工具类及线程池

    JUC中提供了几个比较常用的并发工具类,比如CountDownLatch.CyclicBarrier.Semaphore. CountDownLatch: countdownlatch是一个同步工具类 ...

随机推荐

  1. C#中文件和byte[]互换问题

    如何将图片和声音转化成byte[],并通过webservice进行传输?    如何将webservice传输过来的byte[],转化成我们想要的文件?    (一)文件转化为byte[]    方法 ...

  2. Android 网卡地址Mac Wifi文件

    1./system/etc/firmware/ti-connectivity/wl1271-nvs.bin的文件 2./data/etc/wifi/fw文件 3./data/nvram/APCFG/A ...

  3. Java Tomcat 注册为Windows系统服务

    注册方法: 1. 在DOS命令行模式下,cd到tomcat的bin目录下 cd tomcatpath 根目录加:后回车 进入到tomcat安装目录,cd bin,进入tomcat启动目录 2.在tom ...

  4. python基础之3

    1,列表可以嵌套任何东西.包括字典,列表等 字典是无序的健值型,不需要下标,也可以嵌套列表和字典 2,集合:对列表进行差异化处理后形成集合,特点:去重和无序.主要作用: (1)去重;(2) 关系测试, ...

  5. CentOS7.2安装配置FTP服务器VSFTP

    1,查看系统版本 2,yum安装vsftpd yum -y install vsftpd 3,修改配置文件 vim /etc/vsftpd/vsftpd.conf local_enable=YES w ...

  6. Python全栈day14(集合)

    一,集合 1,集合由不同元素组成 2,无序 3,集合中元素必须是不可变类型 二,定义集合 1,s = {1,2,3,4,5} 2,s = set(hello)以迭代的方式生成集合 s = set(&q ...

  7. PAT 甲级 1020 Tree Traversals (二叉树遍历)

    1020. Tree Traversals (25) 时间限制 400 ms 内存限制 65536 kB 代码长度限制 16000 B 判题程序 Standard 作者 CHEN, Yue Suppo ...

  8. $obj->0

    w对象 数组 分别对内存的 消耗 CI result() This method returns the query result as an array of objects, or an empt ...

  9. Python 线程(threading)

    Python 的thread模块是比较底层的模块,Python的threading模块是对thread做了一些包装,可以更加方便的 被使用; 1. 使用threading 模块 # 示例一: 单线程执 ...

  10. Ansible安装过程中常遇到的错误(FAQ)

    1.安装完成后允许命令报错 Traceback (most recent call last): File , in <module> (runner, results) = cli.ru ...