BIO/NIO底层原理分析

BIO/NIO底层原理分析由来?

两个原因,一BIO/NIO的区别底层原理一直是Java程序员的一个难点、重点,值得学习,也必须要学习;二最近想要入职BAT、TMD进行面试准备,BIO/NIO基本是一个必考问题。


BIO

BIO是什么?

Blocking IO,阻塞IO,同步阻塞IO

同步?

自己去做某件事(Java自己亲自做这件事,并且是指同一个时间点)

阻塞?

类似银行排队去ATM取钱(Java进行IO操作,一直会等到读操作或者写操作完成,当前线程才能去做其他事情)

废话少说上代码

package bio_nio.study;

import java.io .IOException;
import java.io .InputStream;
import java.io .OutputStream;
import java.net.Socket;

/**
 * 客户端
 */
public class FirstClient {

    public static void main(String[] args) {
        try {
            Socket socket = new Socket("localhost", 8000);
            OutputStream outputStream = socket.getOutputStream();
            outputStream.write("hello server, i am client".getBytes());
            outputStream.flush();;
            InputStream inputStream = socket.getInputStream();
            byte[] buffer = new byte[1024];
            int length = 0;
            // 读取服务端的数据
            while ((length = inputStream.read(buffer)) > 0) {
                System.out.println(new String(buffer, 0, length));
            }
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}
package bio_nio.study;

import java.io .IOException;
import java.io .InputStream;
import java.io .OutputStream;
import java.net.ServerSocket;
import java.net.Socket;

/**
 * 服务端
 */
public class FirstServer {

    public static void main(String[] args) {
        try {
            ServerSocket serverSocket = new ServerSocket(8000);
            System.out.println("服务器启动成功,监听端口8000");
            // 不断监听客户端的请求
            while (true) {
                Socket socket = serverSocket.accept();  //阻塞
                InputStream inputStream = socket.getInputStream();
                byte[] buffer = new byte[1024];
                int length = 0;
                // 读取客户端的数据
                while ((length = inputStream.read(buffer)) > 0) {
                    System.out.println(new String(buffer, 0, length));
                }
                // 向客户端写数据
                OutputStream outputStream = socket.getOutputStream();
                outputStream.write("hello java".getBytes());
            }
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}

代码分析:

单线程下的通信
  • 1.同步:java
  • 2.阻塞:
    • accept 是阻塞的。
    • IO进行操作的时候,要么读操作,要么写操作(前提:单线程环境下而言)。
    • BIO中不可能只有一个客户端进行连接,同步阻塞(阻塞主要描述的是IO本身的操作)。

单线程情况如此,那多线程下的BIO呢?

还是先上代码:

package bio_nio.study;

import java.io .IOException;
import java.io .InputStream;
import java.io .OutputStream;
import java.net.Socket;

public class ServerHandler implements Runnable {

    //维护一个socket成员变量,记录传来的socket
    private Socket socket;
    public ServerHandler (Socket socket) {
        this.socket = socket;
    }

    //当前线程要执行的任务
    @Override
    public void run() {
        InputStream inputStream = null;
        try {
            inputStream = socket.getInputStream();
            byte[] buffer = new byte[1024];
            int length = 0;
            //读取客户端的数据
            while ((length = inputStream.read(buffer)) > 0) {
                System.out.println(new String(buffer, 0, length));
            }
            //向客户端写数据
            OutputStream outputStream = socket.getOutputStream();
            outputStream.write("hello java".getBytes());
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}
package bio_nio.study;

import java.io .IOException;
import java.net.ServerSocket;
import java.net.Socket;

/**
 * 多个Socket 多线程
 */
public class SecondServer {

    public static void main (String[] args) {
        ServerSocket serverSocket = null;
        try {
            serverSocket = new ServerSocket(8000);
            System.out.println("服务器启动成功,监听端口8000");
            while (true) {
                Socket socket = serverSocket.accept();
                // 针对每个连接创建一个线程,去处理IO操作
                new Thread(new ServerHandler(socket)).start();
            }
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}

代码分析:

多线程下的通信

存在的问题:
客户端和服务端交互的本质是数据的交流,不应该在一有Socket连接的时候,就进行new Thread;而应该是在有IO操作的时候再去开启线程。


再介绍一种方法:伪异步IO的方式

BIO中,线程池已经可以解决这种问题。

再上代码:

package bio_nio.study;

import java.io.IOException;
import java.net.ServerSocket;
import java.net.Socket;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;

/**
 * BIO 多个Socket多线程,由线程池执行多个任务
 */
public class ThirdServer {

    public static void main (String[] args) {
        ServerSocket serverSocket;
        ExecutorService executorService = Executors.newFixedThreadPool(60);
        try {
            serverSocket = new ServerSocket(8000);
            System.out.println("服务器启动成功,监听端口8000");
            while (true) {
                Socket socket = serverSocket.accept();
                //使用线程池中的线程去执行每个对应的任务
                executorService.execute(new ServerHandler(socket));
            }
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}

代码分析:

线程池下的通信
  • 线程池,进行IO操作的时候,从线程池中分配一个线程去执行run任务;
  • 线程池只提供60个线程,当需求量超过60个线程的时候,则进行等待;

线程池的管理方式带来的问题?
高并发的情况不适用(如果需要600个线程呢?总不能创建600个线程的线程池吧)。


主角出场——NIO

NIO是什么?

New IO,Non-Blocking IO,同步非阻塞

非阻塞?

类似去银行柜台取钱,先去取号,然后在银行大厅等待叫号。(客户端请求连接服务端的时候,服务端将连接请求记录下来,判断是否要进行IO操作)

BIO存在问题?

  • a.每一个socket连接服务端都会立刻开启一个线程进行处理。(解决方案:连接,但不立刻开启线程,有IO操作再开启线程)。
  • b.每个IO操作完成后,线程就会销毁。(解决方案:不要轻易销毁)

废话少说,上代码

package bio_nio.study;

import java.netInetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.*;
import java.util.Iterator;
import java.util.Set;

public class NIOServer {

    private int port = 8000;
    private InetSocketAddress address = null;
    // 注册客户端连接信息
    private Selector selector;

    public NIOServer(int port) {
        try {
            this.port = port;
            address = new InetSocketAddress(this.port);
            ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
            serverSocketChannel.bind(address);
            // 服务器通道设置为非阻塞的模式
            serverSocketChannel.configureBlocking(false);
            selector = Selector.open();
            serverSocketChannel.register(selector, SelectionKey.OP_ACCEPT);
            System.out.println("服务器启动:" + this.port);
        }catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * Selector开始轮询
     */
    public void listen() {
        try {
            //轮询
            while(true) {
                //在Selector上连接的数量
                int wait = this.selector.select();  //类似accept()是阻塞的
                if(wait == 0) continue;
                Set<SelectionKey> keys = this.selector.selectedKeys();
                Iterator<SelectionKey> iterator = keys.iterator();
                while(iterator.hasNext()) {
                    SelectionKey key = iterator.next();
                    //针对每一个客户端进行相应的操作
                    process(key);
                    iterator.remove();
                }
            }
        }catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 处理每一个客户端的请求
     */
    public void process(SelectionKey key) throws Exception {
        ByteBuffer buffer = ByteBuffer.allocate(1024);
        if(key.isAcceptable()) {
            ServerSocketChannel serverSocketChannel = (ServerSocketChannel) key.channel();
            SocketChannel socketChannel = serverSocketChannel.accept();
            socketChannel.configureBlocking(false);
            // 客户端一旦连接上来,进行读写操作
            // 往这个Selector上注册Key,OP_READ,接下来可以进行读操作
            socketChannel.register(selector, SelectionKey.OP_READ);
        } else if(key.isReadable()) {
            SocketChannel socketChannel = (SocketChannel) key.channel();
            int len = socketChannel.read(buffer);
            if(len > 0) {
                buffer.flip();
                String content = new String(buffer.array(), 0, len);
                System.out.println(content);
                socketChannel.register(selector, SelectionKey.OP_WRITE);
            }
            buffer.clear();
        } else if(key.isWritable()) {
            SocketChannel socketChannel = (SocketChannel) key.channel();
            socketChannel.write(buffer.wrap("hello nio".getBytes()));
            socketChannel.close();
        }
    }

代码分析:

NIO下的通信
  • 在服务端有一个线程,用于记录客户端的连接操作。
  • BIO与NIO区别
    BIO:ServerSocket、Socket
    NIO:ServerSocketChannel服务端 8000、SocketChannel客户端、class Selector {}记录客户端的一个状态
  • NIO主要功劳,一Selector机制,二底层使用了Buffer,Buffer构造如图:
Buffer构造

推荐及参考:

  • 可能大家依旧觉得NIO很麻烦,自己使用起来也不是很顺手。首先原理必须要知道,其次Java中的大牛们给我们提供了一个开源框架——netty框架,对NIO的进行了一个很好的封装,感兴趣可以了解下。

  • 参考资料:阿里面试必备之分析IO及NIO的底层原理

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,636评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,890评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,680评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,766评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,665评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,045评论 1 276
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,515评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,182评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,334评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,274评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,319评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,002评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,599评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,675评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,917评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,309评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,885评论 2 341

推荐阅读更多精彩内容