netty为什么非阻塞

Posted

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了netty为什么非阻塞相关的知识，希望对你有一定的参考价值。

参考技术A netty 的非阻塞 到底是指的什么
netty的非阻塞指的是nio
多路复用器是阻塞的 其提供 非阻塞调用 阻塞调用 阻塞一段时间 的调用
也就是我们采用多路复用器操作io的时候 如果是bio 存在2个阻塞 一个是io的本身阻塞
还有一个是多路复用器本身的阻塞，有一个阻塞 就会阻塞
netty使用nio 所以不会发生 io阻塞 netty依靠多路复用器 在没有任何任务的时候 会阻塞调用
当有任务进入队列的时候多路复用器会从阻塞回复

Netty——网络编程（非阻塞理解及代码示例）

目录

一、非阻塞概述

  • 非阻塞模式下，相关方法都会不会让线程暂停。
    （1）、在 ServerSocketChannel.accept 在没有连接建立时，会返回 null，继续运行；
    （2）、SocketChannel.read 在没有数据可读时，会返回 0，但线程不必阻塞，可以去执行其它 SocketChannel 的 read 或是去执行 ServerSocketChannel.accept；
    （3）、写数据时，线程只是等待数据写入 Channel 即可，无需等 Channel 通过网络把数据发送出去；
  • 非阻塞模式下，即使没有连接建立和可读数据，线程仍然在不断运行，白白浪费了 cpu。
  • 数据复制过程中，线程实际还是阻塞的（AIO 改进的地方）。

二、非阻塞模式服务端代码示例（使用nio实现）

  • 服务端代码

    package com.example.nettytest.nio.day3;

import lombok.extern.slf4j.Slf4j;

import java.io.IOException;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.*;
import java.util.ArrayList;
import java.util.Iterator;

import static com.example.nettytest.nio.day1.ByteBufferUtil.debugRead;
/**
 * @description: 非阻塞模式服务端代码示例（使用nio实现）
 * @author: xz
 * @create: 2022-08-16 21:21
 */
@Slf4j
public class TestServer 
    public static void main(String[] args) throws IOException 
        nioNoBlockServer();
    
    
    /**
     * 使用nio来理解非阻塞模式(单线程服务端)
     * */
    private static void nioNoBlockServer() throws IOException 
        //1、创建ByteBuffer，容量16
        ByteBuffer byteBuffer = ByteBuffer.allocate(16);
        //2、创建服务器
        ServerSocketChannel ssc = ServerSocketChannel.open();
        ssc.configureBlocking(false);//ssc设置为非阻塞模式
        //3、绑定监听端口
        ssc.bind(new InetSocketAddress(8080));
        //4、连接集合
        ArrayList<SocketChannel> channels = new ArrayList<>();
        while(true)
            //5、accept() 建立与客户端连接, SocketChannel 用来与客户端之间通信
            SocketChannel sc = ssc.accept();//启动服务端，非阻塞方法，线程会继续运行。如果没有建立连接 sc=null
            if(sc !=null)
                log.info("create connected SocketChannel... ", sc);
                sc.configureBlocking(false);//sc设置为非阻塞模式
                //6、建立的客户端连接sc 添加到 连接集合channels中
                channels.add(sc);
            
            //7、遍历连接集合
            for(SocketChannel channel : channels)
                // 8、 接收客户端发送的数据，从channel中读取数据写入到byteBuffer中
                int read = channel.read(byteBuffer);// 启动客户端，非阻塞方法，线程会继续运行，read 返回 0
                if(read>0)
                    //切换读模式
                    byteBuffer.flip();
                    //打印可读取内容（从byteBuffer中读取数据内容）
                    debugRead(byteBuffer);
                    //切换回写模式
                    byteBuffer.clear();
                    log.info("after read channel ... ", channel);

三、非阻塞模式客户端代码示例（使用nio实现）

  • 客户端代码

    package com.example.nettytest.nio.day3;

import java.io.IOException;
import java.net.InetSocketAddress;
import java.net.SocketAddress;
import java.nio.channels.SocketChannel;
/**
 * @description:
 * @author: xz
 * @create: 2022-08-16 21:45
 */
public class TestClient 
    public static void main(String[] args) throws IOException 
        SocketChannel sc = SocketChannel.open();
        sc.connect(new InetSocketAddress("localhost", 8080));
        SocketAddress address = sc.getLocalAddress();
        //debug模式后，点击src参数，右键选择 输入表达式sc.write(Charset.defaultCharset().encode("hello"));然后执行
        System.out.println("waiting...");

四、工具类代码示例

  • 工具类，打印输入、输出数据使用

    package com.example.nettytest.nio.day1;

import io.netty.util.internal.StringUtil;

import java.nio.ByteBuffer;

import static io.netty.util.internal.MathUtil.isOutOfBounds;
import static io.netty.util.internal.StringUtil.NEWLINE;

public class ByteBufferUtil 
    private static final char[] BYTE2CHAR = new char[256];
    private static final char[] HEXDUMP_TABLE = new char[256 * 4];
    private static final String[] HEXPADDING = new String[16];
    private static final String[] HEXDUMP_ROWPREFIXES = new String[65536 >>> 4];
    private static final String[] BYTE2HEX = new String[256];
    private static final String[] BYTEPADDING = new String[16];

    static 
        final char[] DIGITS = "0123456789abcdef".toCharArray();
        for (int i = 0; i < 256; i++) 
            HEXDUMP_TABLE[i << 1] = DIGITS[i >>> 4 & 0x0F];
            HEXDUMP_TABLE[(i << 1) + 1] = DIGITS[i & 0x0F];
        

        int i;

        // Generate the lookup table for hex dump paddings
        for (i = 0; i < HEXPADDING.length; i++) 
            int padding = HEXPADDING.length - i;
            StringBuilder buf = new StringBuilder(padding * 3);
            for (int j = 0; j < padding; j++) 
                buf.append("   ");
            
            HEXPADDING[i] = buf.toString();
        

        // Generate the lookup table for the start-offset header in each row (up to 64KiB).
        for (i = 0; i < HEXDUMP_ROWPREFIXES.length; i++) 
            StringBuilder buf = new StringBuilder(12);
            buf.append(NEWLINE);
            buf.append(Long.toHexString(i << 4 & 0xFFFFFFFFL | 0x100000000L));
            buf.setCharAt(buf.length() - 9, '|');
            buf.append('|');
            HEXDUMP_ROWPREFIXES[i] = buf.toString();
        

        // Generate the lookup table for byte-to-hex-dump conversion
        for (i = 0; i < BYTE2HEX.length; i++) 
            BYTE2HEX[i] = ' ' + StringUtil.byteToHexStringPadded(i);
        

        // Generate the lookup table for byte dump paddings
        for (i = 0; i < BYTEPADDING.length; i++) 
            int padding = BYTEPADDING.length - i;
            StringBuilder buf = new StringBuilder(padding);
            for (int j = 0; j < padding; j++) 
                buf.append(' ');
            
            BYTEPADDING[i] = buf.toString();
        

        // Generate the lookup table for byte-to-char conversion
        for (i = 0; i < BYTE2CHAR.length; i++) 
            if (i <= 0x1f || i >= 0x7f) 
                BYTE2CHAR[i] = '.';
             else 
                BYTE2CHAR[i] = (char) i;
            
        
    

    /**
     * 打印所有内容
     * @param buffer
     */
    public static void debugAll(ByteBuffer buffer) 
        int oldlimit = buffer.limit();
        buffer.limit(buffer.capacity());
        StringBuilder origin = new StringBuilder(256);
        appendPrettyHexDump(origin, buffer, 0, buffer.capacity());
        System.out.println("+--------+-------------------- all ------------------------+----------------+");
        System.out.printf("position: [%d], limit: [%d]\\n", buffer.position(), oldlimit);
        System.out.println(origin);
        buffer.limit(oldlimit);
    

    /**
     * 打印可读取内容
     * @param buffer
     */
    public static void debugRead(ByteBuffer buffer) 
        StringBuilder builder = new StringBuilder(256);
        appendPrettyHexDump(builder, buffer, buffer.position(), buffer.limit() - buffer.position());
        System.out.println("+--------+-------------------- read -----------------------+----------------+");
        System.out.printf("position: [%d], limit: [%d]\\n", buffer.position(), buffer.limit());
        System.out.println(builder);
    

    public static void main(String[] args) 
        ByteBuffer buffer = ByteBuffer.allocate(10);
        buffer.put(new byte[]97, 98, 99, 100);
        debugAll(buffer);
    

    private static void appendPrettyHexDump(StringBuilder dump, ByteBuffer buf, int offset, int length) 
        if (isOutOfBounds(offset, length, buf.capacity())) 
            throw new IndexOutOfBoundsException(
                    "expected: " + "0 <= offset(" + offset + ") <= offset + length(" + length
                            + ") <= " + "buf.capacity(" + buf.capacity() + ')');
        
        if (length == 0) 
            return;
        
        dump.append(
                "         +-------------------------------------------------+" +
                        NEWLINE + "         |  0  1  2  3  4  5  6  7  8  9  a  b  c  d  e  f |" +
                        NEWLINE + "+--------+-------------------------------------------------+----------------+");

        final int startIndex = offset;
        final int fullRows = length >>> 4;
        final int remainder = length & 0xF;

        // Dump the rows which have 16 bytes.
        for (int row = 0; row < fullRows; row++) 
            int rowStartIndex = (row << 4) + startIndex;

            // Per-row prefix.
            appendHexDumpRowPrefix(dump, row, rowStartIndex);

            // Hex dump
            int rowEndIndex = rowStartIndex + 16;
            for (int j = rowStartIndex; j < rowEndIndex; j++) 
                dump.append(BYTE2HEX[getUnsignedByte(buf, j)]);
            
            dump.append(" |");

            // ASCII dump
            for (int j = rowStartIndex; j < rowEndIndex; j++) 
                dump.append(BYTE2CHAR[getUnsignedByte(buf, j)]);
            
            dump.append('|');
        

        // Dump the last row which has less than 16 bytes.
        if (remainder != 0) 
            int rowStartIndex = (fullRows << 4) + startIndex;
            appendHexDumpRowPrefix(dump, fullRows, rowStartIndex);

            // Hex dump
            int rowEndIndex = rowStartIndex + remainder;
            for (int j = rowStartIndex; j < rowEndIndex; j++) 
                dump.append(BYTE2HEX[getUnsignedByte(buf, j)]);
            
            dump.append(HEXPADDING[remainder]);
            dump.append(" |");

            // Ascii dump
            for (int j = rowStartIndex; j < rowEndIndex; j++) 
                dump.append(BYTE2CHAR[getUnsignedByte(buf, j)]);
            
            dump.append(BYTEPADDING[remainder]);
            dump.append('|');
        

        dump.append(NEWLINE +
                "+--------+-------------------------------------------------+----------------+");
    

    private static void appendHexDumpRowPrefix(StringBuilder dump, int row, int rowStartIndex) 
        if (row < HEXDUMP_ROWPREFIXES.length) 
            dump.append(HEXDUMP_ROWPREFIXES[row]);
         else 
            dump.append(NEWLINE);
            dump.append(Long.toHexString(rowStartIndex & 0xFFFFFFFFL | 0x100000000L));
            dump.setCharAt(dump.length() - 9, '|');
            dump.append('|');
        
    

    public static short getUnsignedByte(ByteBuffer buffer, int index) 
        return (short) (buffer.get(index) & 0xFF);

五、非阻塞模式代码示例本地调试

  • 先启动服务端，然后在启动2个客户端，在服务端控制台可以看到服务端接收到了2个客户端的连接，accept方法为非阻塞方法，线程会继续运行。如下图所示：

  • 客户端1选择sc参数右键，点击【Evaluate Expression…】,弹出的窗口输入sc.write(Charset.defaultCharset().encode(“111111”));表示客户端1发送数据。如下图所示：


  • 查看服务端，已经接收到了客户端1发送的111111数据，服务端程序已执行到完成，但是线程仍会继续运行，等待客户端发送数据。如下图所示：

  • 客户端2选择sc参数右键，点击【Evaluate Expression…】,弹出的窗口输入sc.write(Charset.defaultCharset().encode(“222222”));表示客户端2发送数据。如下图所示：

  • 此时，再次查看服务端，已经接收到了客户端2发送的222222数据，服务端程序已执行到完成，但是线程仍会继续运行，等待客户端发送数据。如下图所示：

以上是关于netty为什么非阻塞的主要内容，如果未能解决你的问题，请参考以下文章

Netty——网络编程（非阻塞理解及代码示例）

Netty——网络编程（非阻塞理解及代码示例）

聊聊Netty那些事儿之从内核角度看IO模型

Netty进阶 -- 非阻塞网络编程 实现群聊+私聊+心跳检测系统

同步阻塞同步非阻塞异步阻塞异步非阻塞

4.socket框架netty的使用，以及nio的实现原理，为啥是异步非阻塞