Java阻塞队列ArrayBlockingQueue和LinkedBlockingQueue实现原理分析

转载自  Java阻塞队列ArrayBlockingQueue和LinkedBlockingQueue实现原理分析

 

Java中的阻塞队列接口BlockingQueue继承自Queue接口。

BlockingQueue接口提供了3个添加元素方法。

  1. add:添加元素到队列里,添加成功返回true,由于容量满了添加失败会抛出IllegalStateException异常
  2. offer:添加元素到队列里,添加成功返回true,添加失败返回false
  3. put:添加元素到队列里,如果容量满了会阻塞直到容量不满

3个删除方法。

  1. poll:删除队列头部元素,如果队列为空,返回null。否则返回元素。
  2. remove:基于对象找到对应的元素,并删除。删除成功返回true,否则返回false
  3. take:删除队列头部元素,如果队列为空,一直阻塞到队列有元素并删除

常用的阻塞队列具体类有ArrayBlockingQueue、LinkedBlockingQueue、PriorityBlockingQueue、LinkedBlockingDeque等。

本文以ArrayBlockingQueue和LinkedBlockingQueue为例,分析它们的实现原理。

 

ArrayBlockingQueue

ArrayBlockingQueue的原理就是使用一个可重入锁和这个锁生成的两个条件对象进行并发控制(classic two-condition algorithm)。

ArrayBlockingQueue是一个带有长度的阻塞队列,初始化的时候必须要指定队列长度,且指定长度之后不允许进行修改。

它带有的属性如下: 

// 存储队列元素的数组,是个循环数组
final Object[] items;// 拿数据的索引,用于take,poll,peek,remove方法
int takeIndex;// 放数据的索引,用于put,offer,add方法
int putIndex;// 元素个数
int count;// 可重入锁
final ReentrantLock lock;
// notEmpty条件对象,由lock创建
private final Condition notEmpty;
// notFull条件对象,由lock创建
private final Condition notFull;

数据的添加

ArrayBlockingQueue有不同的几个数据添加方法,add、offer、put方法。

add方法:

public boolean add(E e) {if (offer(e))return true;elsethrow new IllegalStateException("Queue full");
}

add方法内部调用offer方法如下:

public boolean offer(E e) {checkNotNull(e); // 不允许元素为空final ReentrantLock lock = this.lock;lock.lock(); // 加锁,保证调用offer方法的时候只有1个线程try {if (count == items.length) // 如果队列已满return false; // 直接返回false,添加失败else {insert(e); // 数组没满的话调用insert方法return true; // 返回true,添加成功}} finally {lock.unlock(); // 释放锁,让其他线程可以调用offer方法}
}

insert方法如下:

private void insert(E x) {items[putIndex] = x; // 元素添加到数组里putIndex = inc(putIndex); // 放数据索引+1,当索引满了变成0++count; // 元素个数+1notEmpty.signal(); // 使用条件对象notEmpty通知,比如使用take方法的时候队列里没有数据,被阻塞。这个时候队列insert了一条数据,需要调用signal进行通知
}

put方法:

public void put(E e) throws InterruptedException {checkNotNull(e); // 不允许元素为空final ReentrantLock lock = this.lock;lock.lockInterruptibly(); // 加锁,保证调用put方法的时候只有1个线程try {while (count == items.length) // 如果队列满了,阻塞当前线程,并加入到条件对象notFull的等待队列里notFull.await(); // 线程阻塞并被挂起,同时释放锁insert(e); // 调用insert方法} finally {lock.unlock(); // 释放锁,让其他线程可以调用put方法}
}

ArrayBlockingQueue的添加数据方法有add,put,offer这3个方法,总结如下:

add方法内部调用offer方法,如果队列满了,抛出IllegalStateException异常,否则返回true

offer方法如果队列满了,返回false,否则返回true

add方法和offer方法不会阻塞线程,put方法如果队列满了会阻塞线程,直到有线程消费了队列里的数据才有可能被唤醒。

这3个方法内部都会使用可重入锁保证原子性。

数据的删除

ArrayBlockingQueue有不同的几个数据删除方法,poll、take、remove方法。

poll方法:

public E poll() {final ReentrantLock lock = this.lock;lock.lock(); // 加锁,保证调用poll方法的时候只有1个线程try {return (count == 0) ? null : extract(); // 如果队列里没元素了,返回null,否则调用extract方法} finally {lock.unlock(); // 释放锁,让其他线程可以调用poll方法}
}

poll方法内部调用extract方法:

private E extract() {final Object[] items = this.items;E x = this.<E>cast(items[takeIndex]); // 得到取索引位置上的元素items[takeIndex] = null; // 对应取索引上的数据清空takeIndex = inc(takeIndex); // 取数据索引+1,当索引满了变成0--count; // 元素个数-1notFull.signal(); // 使用条件对象notFull通知,比如使用put方法放数据的时候队列已满,被阻塞。这个时候消费了一条数据,队列没满了,就需要调用signal进行通知return x; // 返回元素
}

take方法:

public E take() throws InterruptedException {final ReentrantLock lock = this.lock;lock.lockInterruptibly(); // 加锁,保证调用take方法的时候只有1个线程try {while (count == 0) // 如果队列空,阻塞当前线程,并加入到条件对象notEmpty的等待队列里notEmpty.await(); // 线程阻塞并被挂起,同时释放锁return extract(); // 调用extract方法} finally {lock.unlock(); // 释放锁,让其他线程可以调用take方法}
}

remove方法:

public boolean remove(Object o) {if (o == null) return false;final Object[] items = this.items;final ReentrantLock lock = this.lock;lock.lock(); // 加锁,保证调用remove方法的时候只有1个线程try {for (int i = takeIndex, k = count; k > 0; i = inc(i), k--) { // 遍历元素if (o.equals(items[i])) { // 两个对象相等的话removeAt(i); // 调用removeAt方法return true; // 删除成功,返回true}}return false; // 删除成功,返回false} finally {lock.unlock(); // 释放锁,让其他线程可以调用remove方法}
}

removeAt方法:

void removeAt(int i) {final Object[] items = this.items;if (i == takeIndex) { // 如果要删除数据的索引是取索引位置,直接删除取索引位置上的数据,然后取索引+1即可items[takeIndex] = null;takeIndex = inc(takeIndex);} else { // 如果要删除数据的索引不是取索引位置,移动元素元素,更新取索引和放索引的值for (;;) {int nexti = inc(i);if (nexti != putIndex) {items[i] = items[nexti];i = nexti;} else {items[i] = null;putIndex = i;break;}}}--count; // 元素个数-1notFull.signal(); // 使用条件对象notFull通知,比如使用put方法放数据的时候队列已满,被阻塞。这个时候消费了一条数据,队列没满了,就需要调用signal进行通知 
}

ArrayBlockingQueue的删除数据方法有poll,take,remove这3个方法,总结如下:

poll方法对于队列为空的情况,返回null,否则返回队列头部元素。

remove方法取的元素是基于对象的下标值,删除成功返回true,否则返回false。

poll方法和remove方法不会阻塞线程。

take方法对于队列为空的情况,会阻塞并挂起当前线程,直到有数据加入到队列中。

这3个方法内部都会调用notFull.signal方法通知正在等待队列满情况下的阻塞线程。

LinkedBlockingQueue

LinkedBlockingQueue是一个使用链表完成队列操作的阻塞队列。链表是单向链表,而不是双向链表。

内部使用放锁和拿锁,这两个锁实现阻塞(“two lock queue” algorithm)。

它带有的属性如下:

// 容量大小
private final int capacity;// 元素个数,因为有2个锁,存在竞态条件,使用AtomicInteger
private final AtomicInteger count = new AtomicInteger(0);// 头结点
private transient Node<E> head;// 尾节点
private transient Node<E> last;// 拿锁
private final ReentrantLock takeLock = new ReentrantLock();// 拿锁的条件对象
private final Condition notEmpty = takeLock.newCondition();// 放锁
private final ReentrantLock putLock = new ReentrantLock();// 放锁的条件对象
private final Condition notFull = putLock.newCondition();

ArrayBlockingQueue只有1个锁,添加数据和删除数据的时候只能有1个被执行,不允许并行执行。

而LinkedBlockingQueue有2个锁,放锁和拿锁,添加数据和删除数据是可以并行进行的,当然添加数据和删除数据的时候只能有1个线程各自执行。

数据的添加

LinkedBlockingQueue有不同的几个数据添加方法,add、offer、put方法。

add方法内部调用offer方法:

public boolean offer(E e) {if (e == null) throw new NullPointerException(); // 不允许空元素final AtomicInteger count = this.count;if (count.get() == capacity) // 如果容量满了,返回falsereturn false;int c = -1;Node<E> node = new Node(e); // 容量没满,以新元素构造节点final ReentrantLock putLock = this.putLock;putLock.lock(); // 放锁加锁,保证调用offer方法的时候只有1个线程try {if (count.get() < capacity) { // 再次判断容量是否已满,因为可能拿锁在进行消费数据,没满的话继续执行enqueue(node); // 节点添加到链表尾部c = count.getAndIncrement(); // 元素个数+1if (c + 1 < capacity) // 如果容量还没满notFull.signal(); // 在放锁的条件对象notFull上唤醒正在等待的线程,表示可以再次往队列里面加数据了,队列还没满}} finally {putLock.unlock(); // 释放放锁,让其他线程可以调用offer方法}if (c == 0) // 由于存在放锁和拿锁,这里可能拿锁一直在消费数据,count会变化。这里的if条件表示如果队列中还有1条数据signalNotEmpty(); // 在拿锁的条件对象notEmpty上唤醒正在等待的1个线程,表示队列里还有1条数据,可以进行消费return c >= 0; // 添加成功返回true,否则返回false
}

put方法:

public void put(E e) throws InterruptedException {if (e == null) throw new NullPointerException(); // 不允许空元素int c = -1;Node<E> node = new Node(e); // 以新元素构造节点final ReentrantLock putLock = this.putLock;final AtomicInteger count = this.count;putLock.lockInterruptibly(); // 放锁加锁,保证调用put方法的时候只有1个线程try {while (count.get() == capacity) { // 如果容量满了notFull.await(); // 阻塞并挂起当前线程}enqueue(node); // 节点添加到链表尾部c = count.getAndIncrement(); // 元素个数+1if (c + 1 < capacity) // 如果容量还没满notFull.signal(); // 在放锁的条件对象notFull上唤醒正在等待的线程,表示可以再次往队列里面加数据了,队列还没满} finally {putLock.unlock(); // 释放放锁,让其他线程可以调用put方法}if (c == 0) // 由于存在放锁和拿锁,这里可能拿锁一直在消费数据,count会变化。这里的if条件表示如果队列中还有1条数据signalNotEmpty(); // 在拿锁的条件对象notEmpty上唤醒正在等待的1个线程,表示队列里还有1条数据,可以进行消费
}

LinkedBlockingQueue的添加数据方法add,put,offer跟ArrayBlockingQueue一样,不同的是它们的底层实现不一样。

ArrayBlockingQueue中放入数据阻塞的时候,需要消费数据才能唤醒。

而LinkedBlockingQueue中放入数据阻塞的时候,因为它内部有2个锁,可以并行执行放入数据和消费数据,不仅在消费数据的时候进行唤醒插入阻塞的线程,同时在插入的时候如果容量还没满,也会唤醒插入阻塞的线程。

数据的删除

LinkedBlockingQueue有不同的几个数据删除方法,poll、take、remove方法。

poll方法:

public E poll() {final AtomicInteger count = this.count;if (count.get() == 0) // 如果元素个数为0return null; // 返回nullE x = null;int c = -1;final ReentrantLock takeLock = this.takeLock;takeLock.lock(); // 拿锁加锁,保证调用poll方法的时候只有1个线程try {if (count.get() > 0) { // 判断队列里是否还有数据x = dequeue(); // 删除头结点c = count.getAndDecrement(); // 元素个数-1if (c > 1) // 如果队列里还有元素notEmpty.signal(); // 在拿锁的条件对象notEmpty上唤醒正在等待的线程,表示队列里还有数据,可以再次消费}} finally {takeLock.unlock(); // 释放拿锁,让其他线程可以调用poll方法}if (c == capacity) // 由于存在放锁和拿锁,这里可能放锁一直在添加数据,count会变化。这里的if条件表示如果队列中还可以再插入数据signalNotFull(); // 在放锁的条件对象notFull上唤醒正在等待的1个线程,表示队列里还能再次添加数据return x;
}

take方法:

public E take() throws InterruptedException {E x;int c = -1;final AtomicInteger count = this.count;final ReentrantLock takeLock = this.takeLock;takeLock.lockInterruptibly(); // 拿锁加锁,保证调用take方法的时候只有1个线程try {while (count.get() == 0) { // 如果队列里已经没有元素了notEmpty.await(); // 阻塞并挂起当前线程}x = dequeue(); // 删除头结点c = count.getAndDecrement(); // 元素个数-1if (c > 1) // 如果队列里还有元素notEmpty.signal(); // 在拿锁的条件对象notEmpty上唤醒正在等待的线程,表示队列里还有数据,可以再次消费} finally {takeLock.unlock(); // 释放拿锁,让其他线程可以调用take方法}if (c == capacity) // 由于存在放锁和拿锁,这里可能放锁一直在添加数据,count会变化。这里的if条件表示如果队列中还可以再插入数据signalNotFull(); // 在放锁的条件对象notFull上唤醒正在等待的1个线程,表示队列里还能再次添加数据return x;
}

remove方法:

public boolean remove(Object o) {if (o == null) return false;fullyLock(); // remove操作要移动的位置不固定,2个锁都需要加锁try {for (Node<E> trail = head, p = trail.next; // 从链表头结点开始遍历p != null;trail = p, p = p.next) {if (o.equals(p.item)) { // 判断是否找到对象unlink(p, trail); // 修改节点的链接信息,同时调用notFull的signal方法return true;}}return false;} finally {fullyUnlock(); // 2个锁解锁}
}

LinkedBlockingQueue的take方法对于没数据的情况下会阻塞,poll方法删除链表头结点,remove方法删除指定的对象。

需要注意的是remove方法由于要删除的数据的位置不确定,需要2个锁同时加锁。

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/327533.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

java实现遍历树形菜单方法——数据库表的创建

这里主要是oracle数据库表的创建&#xff1a; --创建树形菜单表 create table vote_tree (id number(10) not null,text varchar2(30) not null,pid number(10) )---------------------------树形菜单表-------------------------------------- insert into vote_tree v…

SpringBoot(笔记)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-VBJy5yv1-1610191443991)(C:\Users\王东梁\AppData\Roaming\Typora\typora-user-images\image-20210106103928696.png)] [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-yoU…

鸿蒙os更新要求,华为鸿蒙OS即将迎来升级 手机版本或仍需时间

在2019年的华为开发者大会上&#xff0c;华为消费者业务CEO余承东正式对外发布了HarmonyOS。时隔一年后&#xff0c;华为开发者大会2020即将拉开帷幕。此次大会&#xff0c;HarmonyOS无疑仍会是重头戏之一&#xff0c;这个被寄予厚望的操作系统或将迎来新的升级。正如华为所说&…

【新书推荐】《微软开源跨平台移动开发实践》带你走近微软开源开源跨平台技术

上周收到本书作者李争送的一本12月份的新书《微软开源跨平台移动开发实践——利用ASP.NET Core 1.0 、Apache Cordova、Xamarin和Azure快速构建移动应用解决方案》。这本书的名字超长。这本书也是超薄&#xff0c;只有220页&#xff0c;一个周末时间就读完了&#xff0c;但是这…

Java集合(实现类线程安全性)

转载自 Java集合&#xff08;实现类线程安全性&#xff09; 1、集合和Map 下图是Java集合的Collection集合体系的继承树&#xff1a; 下图是Java的Map体系的继承树&#xff1a; 对于Set、List、Queue和Map四种集合&#xff0c;最常用的是HashSet、TreeSet、ArrayList、ArrayQu…

springboot 页面下载文件 网页下载文件功能 文件放resourcce下面

SpringMVC(Springboot)返回文件方法 zhao1949 2018-10-25 09:47:13 6866 收藏 1 https://blog.csdn.net/Lynn_coder/article/details/79953977 ********************************************************* 项目需要生成excel表格&#xff0c;然后返回给用户&#xff0c;用…

java实现遍历树形菜单方法——实体类VoteTree

package org.entity;import java.util.ArrayList; import java.util.List;/*** * * 项目名称&#xff1a;testTree * 类名称&#xff1a;VoteTree * 类描述&#xff1a; 树形菜单实体类 * 创建人&#xff1a;Mu Xiongxiong * 创建时间&#xff1a;2017-5-23 下午…

idea报错 电脑死机蓝屏

1.删除.idea 2.Maven路径不要在D盘 3.重启idea

在html页面中怎么打印区域,在HTML中指定打印区域进行打印机打印

我们在开发中经常会用到一些指定区域进行打印机打印&#xff0c;但是使用常规方式打印会将全部页面打印&#xff0c;当然相同都为打印&#xff0c;但是打印出来的内容并不是我们需要的东西&#xff0c;进行给大家分享如何设置打印机指定区域进行打印&#xff1b;该标签中的内容…

开源软件那么多,我们该如何选择?|洞见

当我们说起开源软件的时候&#xff0c;想必大家都有丰富的使用经历&#xff0c;小到Node.js的一个组件库&#xff0c;大到一套办公软件如LibreOffice&#xff0c;再如Linux操作系统&#xff0c;可以说无奇不有&#xff0c;浩如烟海。就拿我们常用的Github来说&#xff0c;官方的…

Java 集合框架分析:线程安全的集合

转载自 Java 集合框架分析:线程安全的集合 相关文章&#xff1a; Java 集合框架分析:Set http://blog.csdn.net/youyou1543724847/article/details/52733723 Java 集合框架分析:LinkedList http://blog.csdn.net/youyou1543724847/article/details/52734935 Java 集合框架分…

java实现遍历树形菜单方法——映射文件VoteTree.hbm.xml

<?xml version"1.0" encoding"utf-8"?> <!DOCTYPE hibernate-mapping PUBLIC "-//Hibernate/Hibernate Mapping DTD 3.0//EN" "http://hibernate.sourceforge.net/hibernate-mapping-3.0.dtd"> <!-- Mapping file au…

如何使用计算机远程关闭手机软件,如何使用手机远程遥控电脑关机?手机遥控电脑关机方法图文介绍...

电脑定时关机很正常&#xff0c;但是你试过手机遥控电脑关机吗&#xff1f;或许你有时候很懒&#xff0c;相关电脑如何通过手机遥控关机。现在已经可以实现&#xff0c;简单就可以遥控电脑关机。一个屌丝般的软件&#xff0c;高富帅般的技术&#xff0c;下边详细介绍一下如何使…

MyBatisPlus(笔记)

简介 学习MyBatis-Plus之前要先学MyBatis–>Spring—>SpringMVC 为什么要学它?MyBatisPlus可以节省我们大量的时间,所有CRUD代码都可以自动完成 JPA, tk-mapper ,MyBatisPlus 偷懒用的! 是什么? 官网:https://baomidou.com/ 特性 无侵入&#xff1a;只做增强不做…

Java多线程:线程安全和非线程安全的集合对象

转载自 Java多线程&#xff1a;线程安全和非线程安全的集合对象 一、概念&#xff1a; 线程安全&#xff1a;就是当多线程访问时&#xff0c;采用了加锁的机制&#xff1b;即当一个线程访问该类的某个数据时&#xff0c;会对这个数据进行保护&#xff0c;其他线程不能对其访问…

WebAPi的可视化输出模式(RabbitMQ、消息补偿相关)——所有webapi似乎都缺失的一个功能

最近的工作我在做一个有关于消息发送和接受封装工作。大概流程是这样的&#xff0c;消息中间件是采用rabbitmq&#xff0c;为了保证消息的绝对无丢失&#xff0c;我们需要在发送和接受前对消息进行DB落地。在发送前我会先进行DB的插入&#xff0c;单表插入&#xff0c;所以在性…

java实现遍历树形菜单方法——Dao层

Dao层接口&#xff1a;/** * Title: IVoteTreeDao.java * Package org.dao * Description: TODO该方法的主要作用&#xff1a; * author A18ccms A18ccms_gmail_com * date 2017-5-6 下午10:38:47 * version V1.0 */ package org.dao;import java.util.List;import org.e…

文件损坏 无法删除 怎么使用chkdsk磁盘修复工具

有时候我们会遇到文件无法删除的问题&#xff0c;该如何解决。对于专业人士可能比较简单。对于小白&#xff0c;就够折腾人的了。下面分享下我是怎么做的。 很简单很实用。 现象&#xff1a;此时哪里有损坏&#xff0c;一般会在删除文件时&#xff0c;莫名的提示有文件无法删除…

计算机网络产生的历史背景,网络技术背景及sdn概述.pdf

网络技术背景及sdn概述软件定义网络黄韬北京邮电大学北京邮电大学第1章&#xff1a;背景与概述个人简介个人简介• 黄韬– 信息与通信工程学院– 博士&#xff0c;副教授– 科研方向科研方向&#xff1a;&#xff1a;未来网络未来网络– 教学课程&#xff1a;计算机网络、软件定…