同步非阻塞模式(NonBlocking IO)

在非阻塞模式中,发出Socket的accept()read()操作时,如果内核中的数据还没有准备好,那么它并不会阻塞用户进程,而是立刻返回一个信息。也就是说进程发起一个read操作后,并不需要一直阻塞等待,而是马上就得到了一个结果。

如果结果发现数据准备完毕就可以读取数据,然后拷贝到用户内存。如果结果发现数据没有就绪也会返回,进程继续不断的主动询问数据的准备情况是非阻塞模式的一个特点。

伪代码表示如下:

  1. {
  2. while(read(socket, buffer) != SUCCESS){
  3. }
  4. process(buffer);
  5. }

Java同步非阻塞模式

如上所述,Java的Socket是阻塞模式的典型应用。在发起accpet()read()请求之后会持续阻塞,但是Java中提供了setSoTimeout()方法设置超时时间,在固定时间内没有得到结果,就会结束本次阻塞,等待进行下一次的阻塞轮训。这是,也就实现了应用层面的非阻塞。

Java中Socket中的setSoTimeout()方法:

  1. public synchronized void setSoTimeout(int timeout) throws SocketException {
  2. if (isClosed())
  3. throw new SocketException("Socket is closed");
  4. if (timeout < 0)
  5. throw new IllegalArgumentException("timeout can't be negative");
  6. getImpl().setOption(SocketOptions.SO_TIMEOUT, new Integer(timeout));
  7. }

Java同步非阻塞模式编码

通过设置setSoTimeout()使阻塞模式的服务端accpet()read()优化为非阻塞模式。

SocketServerNioListenAndRead.java


  1. import org.slf4j.Logger;
  2. import org.slf4j.LoggerFactory;
  3. import java.io.IOException;
  4. import java.io.InputStream;
  5. import java.io.OutputStream;
  6. import java.net.ServerSocket;
  7. import java.net.Socket;
  8. import java.net.SocketException;
  9. import java.net.SocketTimeoutException;
  10. /**
  11. * <p>
  12. * 非阻塞IO - 监听非阻塞 - 读取非阻塞
  13. *
  14. * @Author niujinpeng
  15. * @Date 2018/10/15 14:53
  16. */
  17. public class SocketServerNioListenAndRead {
  18. /**
  19. * 日志
  20. */
  21. private static final Logger logger = LoggerFactory.getLogger(SocketServerNioListenAndRead.class);
  22. private static Object xWait = new Object();
  23. public static void main(String[] args) throws IOException {
  24. ServerSocket serverSocket = null;
  25. try {
  26. serverSocket = new ServerSocket(83);
  27. serverSocket.setSoTimeout(100);
  28. while (true) {
  29. Socket socket = null;
  30. try {
  31. socket = serverSocket.accept();
  32. } catch (SocketTimeoutException e) {
  33. synchronized (SocketServerNioListenAndRead.xWait) {
  34. logger.info("没有从底层接收到任务数据报文,等待10ms,,模拟事件X的处理时间");
  35. SocketServerNioListenAndRead.xWait.wait(10);
  36. }
  37. continue;
  38. }
  39. InputStream input = socket.getInputStream();
  40. OutputStream output = socket.getOutputStream();
  41. Integer sourcePort = socket.getPort();
  42. int maxLen = 2048;
  43. byte[] contentBytes = new byte[maxLen];
  44. int realLen;
  45. StringBuffer message = new StringBuffer();
  46. // 接收消息非阻塞实现
  47. socket.setSoTimeout(10);
  48. BIORead:
  49. while (true) {
  50. try {
  51. // 读取的时候,程序会阻塞,知道系统把网络传过来的数据准备完毕
  52. while ((realLen = input.read(contentBytes, 0, maxLen)) != -1) {
  53. message.append(new String(contentBytes, 0, realLen));
  54. /**
  55. * 如果收到over,表示传送完毕
  56. */
  57. if (message.toString().endsWith("over")) {
  58. break BIORead;
  59. }
  60. }
  61. } catch (SocketTimeoutException e) {
  62. //===========================================================
  63. // 执行到这里,说明本次read没有接收到任何数据流
  64. // 主线程在这里又可以做一些事情,记为Y
  65. //===========================================================
  66. logger.info("这次没有从底层接收到任务数据报文,等待10毫秒,模拟事件Y的处理时间");
  67. continue;
  68. }
  69. }
  70. // 输出信息
  71. logger.info("服务器收到来自端口" + sourcePort + "的消息:" + message.toString());
  72. // 响应
  73. output.write("Done!".getBytes());
  74. output.close();
  75. input.close();
  76. socket.close();
  77. }
  78. } catch (SocketException | InterruptedException e) {
  79. logger.error(e.getMessage(), e);
  80. } finally {
  81. if (serverSocket != null) {
  82. serverSocket.close();
  83. }
  84. }
  85. }
  86. }

上面的代码可以实现监听和读取数据的非阻塞,但是还是只能一个一个的处理,可以使用多线程稍微改进

SocketServerNioListenThread.java


  1. import org.slf4j.Logger;
  2. import org.slf4j.LoggerFactory;
  3. import java.io.InputStream;
  4. import java.io.OutputStream;
  5. import java.net.ServerSocket;
  6. import java.net.Socket;
  7. import java.net.SocketTimeoutException;
  8. /**
  9. * <p>
  10. * 非阻塞IO - 监听非阻塞 - 读取非阻塞
  11. * 通过加入线程的概念,让socket server能够在应用层面
  12. * 通过非阻塞的方式同时处理多个socket套接字
  13. * <p>
  14. * 此时可以实现非阻塞的IO,但是因为调用了系统底层的阻塞同步IO,
  15. * 因此仍然没有从根本上解决问题
  16. *
  17. * @Author niujinpeng
  18. * @Date 2018/10/15 15:23
  19. */
  20. public class SocketServerNioListenThread {
  21. private static Object xWait = new Object();
  22. private static final Logger LOGGER = LoggerFactory.getLogger(SocketServerNioListenThread.class);
  23. public static void main(String[] args) throws Exception {
  24. ServerSocket serverSocket = new ServerSocket(83);
  25. serverSocket.setSoTimeout(100);
  26. try {
  27. while (true) {
  28. Socket socket = null;
  29. try {
  30. socket = serverSocket.accept();
  31. } catch (SocketTimeoutException e1) {
  32. //===========================================================
  33. // 执行到这里,说明本次accept没有接收到任何TCP连接
  34. // 主线程在这里就可以做一些事情,记为X
  35. //===========================================================
  36. synchronized (SocketServerNioListenThread.xWait) {
  37. LOGGER.info("这次没有从底层接收到任何TCP连接,等待10毫秒,模拟事件X的处理时间");
  38. SocketServerNioListenThread.xWait.wait(10);
  39. }
  40. continue;
  41. }
  42. //当然业务处理过程可以交给一个线程(这里可以使用线程池),并且线程的创建是很耗资源的。
  43. //最终改变不了.accept()只能一个一个接受socket连接的情况
  44. SocketServerThread socketServerThread = new SocketServerThread(socket);
  45. new Thread(socketServerThread).start();
  46. }
  47. } catch (Exception e) {
  48. LOGGER.error(e.getMessage(), e);
  49. } finally {
  50. if (serverSocket != null) {
  51. serverSocket.close();
  52. }
  53. }
  54. }
  55. }
  56. /**
  57. * 当然,接收到客户端的socket后,业务的处理过程可以交给一个线程来做。
  58. * 但还是改变不了socket被一个一个的做accept()的情况。
  59. *
  60. * @author niujinpeng
  61. */
  62. class SocketServerThread implements Runnable {
  63. /**
  64. * 日志
  65. */
  66. private static final Logger LOGGER = LoggerFactory.getLogger(SocketServerThread.class);
  67. private Socket socket;
  68. public SocketServerThread(Socket socket) {
  69. this.socket = socket;
  70. }
  71. @Override
  72. public void run() {
  73. InputStream in = null;
  74. OutputStream out = null;
  75. try {
  76. in = socket.getInputStream();
  77. out = socket.getOutputStream();
  78. Integer sourcePort = socket.getPort();
  79. int maxLen = 2048;
  80. byte[] contextBytes = new byte[maxLen];
  81. int realLen;
  82. StringBuffer message = new StringBuffer();
  83. //下面我们收取信息(设置成非阻塞方式,这样read信息的时候,又可以做一些其他事情)
  84. this.socket.setSoTimeout(10);
  85. BIORead:
  86. while (true) {
  87. try {
  88. while ((realLen = in.read(contextBytes, 0, maxLen)) != -1) {
  89. message.append(new String(contextBytes, 0, realLen));
  90. /*
  91. * 我们假设读取到“over”关键字,
  92. * 表示客户端的所有信息在经过若干次传送后,完成
  93. * */
  94. if (message.indexOf("over") != -1) {
  95. break BIORead;
  96. }
  97. }
  98. } catch (SocketTimeoutException e2) {
  99. //===========================================================
  100. // 执行到这里,说明本次read没有接收到任何数据流
  101. // 主线程在这里又可以做一些事情,记为Y
  102. //===========================================================
  103. LOGGER.info("这次没有从底层接收到任务数据报文,等待10毫秒,模拟事件Y的处理时间");
  104. continue;
  105. }
  106. }
  107. //下面打印信息
  108. Long threadId = Thread.currentThread().getId();
  109. LOGGER.info("服务器(线程:" + threadId + ")收到来自于端口:" + sourcePort + "的信息:" + message);
  110. //下面开始发送信息
  111. out.write("回发响应信息!".getBytes());
  112. //关闭
  113. out.close();
  114. in.close();
  115. this.socket.close();
  116. } catch (Exception e) {
  117. LOGGER.error(e.getMessage(), e);
  118. }
  119. }
  120. }

同步非阻塞模式总结

用户需要不断地调用,尝试读取数据,直到读取成功后,才继续处理接收的数据。整个IO请求的过程中,虽然用户线程每次发起IO请求后可以立即返回,但是为了等到数据,仍需要不断地轮询、重复请求,消耗了大量的CPU的资源。一般很少直接使用这种模型,而是在其他IO模型中使用非阻塞IO这一特性。

开发难度相对于阻塞IO模式较难,适合并发小且不需要及时响应的网络应用开发。


本文原发于个人博客https://www.codingme.net 转载请注明出处

GitHub 源码:https://github.com/niumoo/java-toolbox/

此文参考文章:IO复用,AIO,BIO,NIO,同步,异步,阻塞和非阻塞

此文参考文章:6.2 I/O Models

IO通信模型(二)同步非阻塞模式NIO(NonBlocking IO)的更多相关文章

  1. IO同步阻塞与同步非阻塞

    BIO.NIO.AIO IO(BIO)和NIO区别:其本质就是阻塞和非阻塞的区别 阻塞概念:应用程序在获取网络数据的时候,如果网络传输数据很慢,就会一直等待,直到传输完毕为止. 非阻塞概念:应用程序直 ...

  2. 【面试】迄今为止把同步/异步/阻塞/非阻塞/BIO/NIO/AIO讲的这么清楚的好文章(快快珍藏)

    常规的误区 假设有一个展示用户详情的需求,分两步,先调用一个HTTP接口拿到详情数据,然后使用适合的视图展示详情数据. 如果网速很慢,代码发起一个HTTP请求后,就卡住不动了,直到十几秒后才拿到HTT ...

  3. 【转载】迄今为止把同步/异步/阻塞/非阻塞/BIO/NIO/AIO讲的这么清楚的好文章(快快珍藏)

    原文链接:https://www.cnblogs.com/lixinjie/p/10811219.html 常规的误区 假设有一个展示用户详情的需求,分两步,先调用一个HTTP接口拿到详情数据,然后使 ...

  4. 同步/异步/阻塞/非阻塞/BIO/NIO/AIO

    转摘自:https://www.cnblogs.com/lixinjie/p/a-post-about-io-clearly.html 常规的误区 假设有一个展示用户详情的需求,分两步,先调用一个HT ...

  5. 迄今为止把同步/异步/阻塞/非阻塞/BIO/NIO/AIO讲的这么清楚的好文章(快快珍藏)

    常规的误区 假设有一个展示用户详情的需求,分两步,先调用一个HTTP接口拿到详情数据,然后使用适合的视图展示详情数据. 如果网速很慢,代码发起一个HTTP请求后,就卡住不动了,直到十几秒后才拿到HTT ...

  6. 同步/异步/阻塞/非阻塞/BIO/NIO/AIO各种情况介绍

    常规的误区 假设有一个展示用户详情的需求,分两步,先调用一个HTTP接口拿到详情数据,然后使用适合的视图展示详情数据. 如果网速很慢,代码发起一个HTTP请求后,就卡住不动了,直到十几秒后才拿到HTT ...

  7. 同步异步阻塞非阻塞Reactor模式和Proactor模式 (目前JAVA的NIO就属于同步非阻塞IO)

    在高性能的I/O设计中,有两个比较著名的模式Reactor和Proactor模式,其中Reactor模式用于同步I/O,而Proactor运用于异步I/O操作. 在比较这两个模式之前,我们首先的搞明白 ...

  8. java的高并发IO原理,阻塞BIO同步非阻塞NIO,异步非阻塞AIO

    原文地址: IO读写的基础原理 大家知道,用户程序进行IO的读写,依赖于底层的IO读写,基本上会用到底层的read&write两大系统调用.在不同的操作系统中,IO读写的系统调用的名称可能不完 ...

  9. 如何解读 Java IO、NIO 中的同步阻塞与同步非阻塞?

    原文链接:如何解读 Java IO.NIO 中的同步阻塞与同步非阻塞? 一.前言 最近刚读完一本书:<Netty.Zookeeper.Redis 并发实战>,个人觉得 Netty 部分是写 ...

随机推荐

  1. Java当中的IO三

    1.处理流的使用实例 bufferedReader(处理流)介绍: buffereReader属于字符流,其次也是处理流,也是输入流,即字符输入处理流 常用方法 readLine() Buffered ...

  2. 动态sql语句,非存储过程,如何判断某条数据是否存在,如果不存在就添加一条

    已知一个表 table 里面有两个字段  A1 和 A2 如何用动态语句 判断 A1 = A , A2=B 的数据是否存在,如果不存在,就添加一条数据, A1 = A , A2 = B INSERT  ...

  3. Nginx的虚拟主机配置

    虚拟主机技术能够让同一台服务器.同一组Nginx进程上运行多个网站,降低了资金和服务器资源的损耗.Nginx可以配置三种类型的虚拟主机,本文就是主要介绍这三种虚拟主机配置方式. 配置基于IP的虚拟主机 ...

  4. Java基础——关于jar包的知识

    在学习jar包之前,要先弄懂Java包,以及关于Java包的相关概念. 一.包 为了更好地组织类,Java提供了包机制.包是类的容器,用于分隔类名空间.如果没有指定包名,所有的示例都属于一个默认的无名 ...

  5. linux df -i 100%处理

    发现空间是足够的,然后df -i 查看了下inodes,发现根目录下的inodes值使用率为100%了 解决方法:通过以下脚本进行检查,查看到底哪个目录下面的文件最多: find / -xdev -p ...

  6. Tomcat问题

    1 Tomcat控制台中文乱码 打开tomcat/conf/logging.properties 找到java.util.logging.ConsoleHandler.encoding = UTF-8 ...

  7. Android图标

    在线生成安卓App图标.IOS App图标 https://icon.wuruihong.com

  8. unittest批量执行测试用例

    现有四个测试用例分别在两个.py文件中,如何执行这些文件? unittest中有这样处理:unittest.TestLoader().discover() 第一个文件test_case1.py fro ...

  9. mysql5.7忽略大小写问题

    mysql5.7忽略大小写问题 1.1 前言 新安装mysql5.7版本后,linux环境下默认是大小写敏感的. 1.2 忽略大小写敏感步骤 进入mysql配置文件:         vi   /et ...

  10. Naïve Media Player, Part 2

    项目主页网址: https://github.com/Judylalala/en Q1:如何播放online歌曲? A1:我本来以为会为MediaElement设置一个单独的属性播放online音频. ...