首页 > 其他分享 >线程池

线程池

时间:2023-09-04 23:33:06浏览次数:31  
标签:try task 队列 lock worker queue 线程

自定义线程池

步骤1:自定义阻塞队列

class BlockingQueue<T> {
   // 1. 任务队列,双向链表
   private Deque<T> queue = new ArrayDeque<>();
   // 2. 锁
   private ReentrantLock lock = new ReentrantLock();
   // 3. 生产者条件变量,队列满就等待
   private Condition fullWaitSet = lock.newCondition();
   // 4. 消费者条件变量,队列空就等待
   private Condition emptyWaitSet = lock.newCondition();
   // 5. 容量
   private int capcity;
 
   public BlockingQueue(int capcity) {     this.capcity = capcity;   }   // 带超时阻塞获取(队列空会等待)   public T poll(long timeout, TimeUnit unit) {     lock.lock();     try {       // 将 timeout 统一转换为 纳秒       long nanos = unit.toNanos(timeout);       // 队列空,等待       while (queue.isEmpty()) {         try {           // 返回值是剩余时间           if (nanos <= 0) {             return null;           }           nanos = emptyWaitSet.awaitNanos(nanos);         } catch (InterruptedException e) {           e.printStackTrace();         }       }        T t = queue.removeFirst();        // 唤醒因队列满而等待的【添加】线程       fullWaitSet.signal();       return t;     } finally {       lock.unlock();     }   }   // 阻塞获取(队列空就等待)   public T take() {     lock.lock();     try {         // 队列空,等待        while (queue.isEmpty()) {          try {           emptyWaitSet.await();          } catch (InterruptedException e) {           e.printStackTrace();          }        }         T t = queue.removeFirst();        // 唤醒因队列满而等待的【添加】线程       fullWaitSet.signal();       return t;     } finally {       lock.unlock();     }   }   // 阻塞添加(队列满就等待)   public void put(T task) {     lock.lock();     try {       // 队列满,等待       while (queue.size() == capcity) {         try {           log.debug("等待加入任务队列 {} ...", task);           fullWaitSet.await();         } catch (InterruptedException e) {           e.printStackTrace();         }       }       log.debug("加入任务队列 {}", task);       queue.addLast(task);       // 唤醒因队列空而等待的 取出线程       emptyWaitSet.signal();     } finally {       lock.unlock();     }   }   // 带超时时间阻塞添加(队列满就等待)   public boolean offer(T task, long timeout, TimeUnit timeUnit) {     lock.lock();     try {       long nanos = timeUnit.toNanos(timeout);        // 队列满,等待       while (queue.size() == capcity) {         try {           if(nanos <= 0) {             return false;           }           log.debug("等待加入任务队列 {} ...", task);           nanos = fullWaitSet.awaitNanos(nanos);         } catch (InterruptedException e) {           e.printStackTrace();         }       }       log.debug("加入任务队列 {}", task);       queue.addLast(task);       // 唤醒因队列空而等待的 取出线程       emptyWaitSet.signal();       return true;     } finally {       lock.unlock();     }   }
  public int size() {     lock.lock();     try {       return queue.size();     } finally {       lock.unlock();     }   }
  public void tryPut(RejectPolicy<T> rejectPolicy, T task) {     lock.lock();     try {       // 判断队列是否满       if(queue.size() == capcity) {         rejectPolicy.reject(this, task);       } else { // 有空闲         log.debug("加入任务队列 {}", task);         queue.addLast(task);         emptyWaitSet.signal();       }     } finally {       lock.unlock();     }    } }

步骤2:自定义线程池

class ThreadPool {
   // 任务队列
   private BlockingQueue<Runnable> taskQueue;
   // 线程集合
   private HashSet<Worker> workers = new HashSet<>();
   // 核心线程数
   private int coreSize;
   // 获取任务时的超时时间
   private long timeout;
   private TimeUnit timeUnit;
   private RejectPolicy<Runnable> rejectPolicy;
   
   // 执行任务   public void execute(Runnable task) {     // 当任务数没有超过 coreSize 时,直接新建一个 worker 对象,并交给 worker 对象执行     // 如果任务数超过 coreSize 时,不会再新建 worker 对象。加入任务队列暂存,等待已有的 worker 线程执行。     synchronized (workers) {       if(workers.size() < coreSize) {         Worker worker = new Worker(task);         log.debug("新增 worker{}, {}", worker, task);         workers.add(worker);         worker.start();       } else {         // taskQueue.put(task);         // 1) 死等         // 2) 带超时等待         // 3) 让调用者放弃任务执行         // 4) 让调用者抛出异常         // 5) 让调用者自己执行任务         taskQueue.tryPut(rejectPolicy, task);       }      }   }
  public ThreadPool(int coreSize, long timeout, TimeUnit timeUnit, int queueCapcity,      RejectPolicy<Runnable> rejectPolicy) {     this.coreSize = coreSize;     this.timeout = timeout;     this.timeUnit = timeUnit;     this.taskQueue = new BlockingQueue<>(queueCapcity);       this.rejectPolicy = rejectPolicy;     }     
    class Worker extends Thread{       private Runnable task;       public Worker(Runnable task) {         this.task = task;       }
      @Override       public void run() {         // 执行任务         // 1) 当 task 不为空,执行任务         // 2) 当 task 执行完毕,再接着从任务队列【阻塞等待】获取任务并执行(如果有超时时间,空了之后就可以在下面移除掉)         // while(task != null || (task = taskQueue.take()) != null) {         while(task != null || (task = taskQueue.poll(timeout, timeUnit)) != null) {           try {             log.debug("正在执行...{}", task);              task.run();           } catch (Exception e) {             e.printStackTrace();           } finally {             task = null;           }          }         synchronized (workers) {           log.debug("worker 被移除{}", this);           workers.remove(this);         }       }     } }

测试:

public static void main(String[] args) {
   ThreadPool threadPool = new ThreadPool(1, 1000, TimeUnit.MILLISECONDS, 1, (queue, task)->{
     // 1. 死等
    // queue.put(task);
     // 2) 带超时等待
    // queue.offer(task, 1500, TimeUnit.MILLISECONDS);
     // 3) 让调用者放弃任务执行
    // log.debug("放弃{}", task);
     // 4) 让调用者抛出异常
    // throw new RuntimeException("任务执行失败 " + task);
     // 5) 让调用者自己执行任务
     task.run();
   });
   for (int i = 0; i < 4; i++) {
     int j = i;
     threadPool.execute(() -> {
       try {
         Thread.sleep(1000L);
       } catch (InterruptedException e) {
         e.printStackTrace();
       }
       log.debug("{}", j);
     });
   }
 }

不带超时的 take

即时队列空, worker 线程也会一直阻塞等待。也就是说不会走到下面从 workers(一个set) 里面移除当前 worker

带超时的 take

队列空,阻塞等待一段时间就结束了。就会走到下面的逻辑,从 workers(一个set) 里移除当前 worker

 

标签:try,task,队列,lock,worker,queue,线程
From: https://www.cnblogs.com/suBlog/p/17675921.html

相关文章

  • java线程原理
    目录Java线程原理为什么需要线程使用Java源码概要Hotspot中的线程线程创建和执行及结束的全流程创建启动运行和退出线程join的原理线程interrupt的原理可中断IO的实现interrupt0的实现Java线程原理单词thread原意是线,在计算机科学引申为一串执行过程组成的线,线程是......
  • Java线程状态
    目录Java线程状态NEWRUNNABLEBLOCKEDWAITINGTIMED_WAITING测试Java线程状态Java中有六个线程状态://Thread.StatepublicenumState{NEW,RUNNABLE,BLOCKED,WAITING,TIMED_WAITING,TERMINATED;}这些线程状态表示线程的生命周期,其状态变......
  • 《C++》11新特性--多线程
    thread创建线程,不会阻塞主线程thread成员函数voidthread::join();阻塞线程,当前线程执行完毕才会往下执行boolthread::joinble();线程是否可以连接,返回voidthread::detach();分离主线程和子线程的关联voidprintI(){for(size_ti=0;i<100;i++){std::c......
  • ##线程面试题##
    一.java中线程实现几种实现方式在Java中实现多线程一共有四种方式:(1)继承Thread类(2)实现Runable接口(3)实现Callable接口(4)线程池1.继承java.lang.Thread,重写run方法,启动线程,调用start()方法>2.实现java.lang.Runnable接口,实现run方法3.实现Callable接口(JDK8新特性)该方法效率较低,......
  • 线程池至少需要线程数——23秋招招行网络科技第一批技术测评_后端(c++)
    题目:有n个计划,每个计划有开始,结束时间,求线程池最少需要多少个线程?例:输入:2,[[1,2],[3,4]],输出:1输入:2, [[1,3],[2,4]],输出:2 思路:贪心算法PS:其实我不是很理解下面代码第11行,分别对a,b数组排序1#include<bits/stdc++.h>2usingnamespacestd;34intma......
  • 多线程|生产者消费模型
    在正式介绍生产者消费者模型之前,我们先来认识一下阻塞队列。阻塞队列是特殊的队列,是在先进先出的基础上加了一些特殊的功能:1)如果队列为空,线程要执行出队操作时,就会进入阻塞,阻塞直到另一个线程往队列里添加元素;2)如果队列满了,线程要进行入队操作时,就会进入阻塞,直到有另一个线程从......
  • ThreadLocal:线程中的全局变量 | 京东云技术团队
    最近接了一个新需求,业务场景上需要在原有基础上新增2个字段,接口新增参数意味着很多类和方法的逻辑都需要改变,需要先判断是否属于该业务场景,再做对应的逻辑。原本的打算是在入口处新增变量,在操作数据的时候进行逻辑判断将变量进行存储或查询。如果全链路都变更入参和结构,很明显代码......
  • 记遇到的一次system error问题,主要还是ArrayList的线程安全问题
    1、问题:今天在进行页面点击的时候,突然出现了个systemerror弹出提示,而且经过多次点击之后,发现并不是每次都会有这个报错,很偶然的才会有一次报错,所以首先想到应该是跟多线程有关,不然不可能出现随机的错误2、解决:所以就去看日志,发现报错的是这个地方:Arrays.sort(taskTimes);在......
  • ThreadLocal:线程中的全局变量
    最近接了一个新需求,业务场景上需要在原有基础上新增2个字段,接口新增参数意味着很多类和方法的逻辑都需要改变,需要先判断是否属于该业务场景,再做对应的逻辑。原本的打算是在入口处新增变量,在操作数据的时候进行逻辑判断将变量进行存储或查询。如果全链路都变更入参和结构,很明显代......
  • java多线程爬取笔趣阁所有小说
    可以选择下载的数量,全部下载下来够呛,首先没那么大的盘新版本:https://wws.lanzous.com/iAEMoghsgeb密码:7vjzjar包:https://wws.lanzous.com/ilphyghsgcj密码:f38a <dependency><!--jsoupHTMLparserlibrary[url=home.php?mod=space&uid=402414]@[/url]htt......