從一個Demo開始,揭開Netty的神秘面紗

本文是Netty系列第5篇

上一篇文章我們對於I/O多路復用、Java NIO包 和 Netty 的關係有了全面的認識。

到目前為止,我們已經從I/O模型出發,逐步接觸到了Netty框架。這個過程中,基本解答了Netty是什麼、為什麼使用Netty等前置問題。給我們學習Netty提供了最原始的背景知識。

有了這些做基礎,下面我們可以開始慢慢去揭開Netty的神秘面紗了。

從一個Demo開始,揭開Netty的神秘面紗

 

本文預計閱讀時間約 5分鐘,將重點圍繞以下幾個問題展開:

  • 如何用Netty編寫一個Server端服務Demo
  • 從Demo看Netty的邏輯架構,初識各個組件

1.編寫一個Server端Demo

1.1 基於主從Reactor模式的Demo實現

如果從來沒用過Netty,那麼了解一下用Netty編寫的Server端Demo是必不可少的。

還記得我們上一篇說的 「主從Reactor模式」 嗎?可以構建兩個 Reactor,主 Reactor 單獨監聽server socket,accept新連接,然後將建立的 SocketChannel 註冊給指定的從 Reactor,從Reactor再執行事件的讀寫、分發,把業務處理就扔給worker線程池完成。

從一個Demo開始,揭開Netty的神秘面紗

 

我們就按照這個模式,用Netty編寫一個服務端程序吧。

直接上代碼!

一個簡單的自定義ChannelHandler類,用來自定義業務處理邏輯:

從一個Demo開始,揭開Netty的神秘面紗

 

一個包含Bootstrap的服務端啟動類:

public class EchoServer {
    private int port;

    public EchoServer(int port) {
        this.port = port;
    }

    public static void main(String[] args) throws Exception {
        new EchoServer(8833).start();
    }

    public void start() throws Exception {
        //1.Reactor模型的主、從多線程
        EventLoopGroup mainGroup = new NioEventLoopGroup();
        EventLoopGroup childGroup = new NioEventLoopGroup();

        try {
            //2.構造引導器實例ServerBootstrap
            ServerBootstrap b = new ServerBootstrap();
            b.group(mainGroup, childGroup)
                    .channel(NioServerSocketChannel.class) //2.1 設置NIO的channel
                    .localAddress(new InetSocketAddress(port)) //2.2 配置本地監聽端口
                    .childHandler(new ChannelInitializer<SocketChannel>() { //2.3 初始化channel的時候,配置Handler
                        @Override
                        protected void initChannel(final SocketChannel socketChannel) {
                            socketChannel.pipeline()
                                    .addLast("codec", new HttpServerCodec())
                                    .addLast("compressor", new HttpContentCompressor())
                                    .addLast("aggregator", new HttpObjectAggregator(65536))
                                    .addLast("handler", new EchoServerHandler()); //2.4 加入自定義業務邏輯ChannelHandler
                        }
                    });
            ChannelFuture f = b.bind().sync(); //3.啟動監聽
            System.out.println("Http Server started, Listening on " + port);
            f.channel().closeFuture().sync();
        } finally {
            mainGroup.shutdownGracefully().sync();
            childGroup.shutdownGracefully().sync();
        }
    }
}

啟動後,通過curl調用,得到響應。

從一個Demo開始,揭開Netty的神秘面紗

 

Demo完成了!

對於之前覺得用Java NIO包實現起來很複雜的的 「主從Reactor模式」 ,用Netty簡簡單單就完成了。

從一個Demo開始,揭開Netty的神秘面紗

 

只需要創建兩個EventLoopGroup,然後綁定到引導器ServerBootstrap上就好了.

mainGroup 是主 Reactor,childGroup 是從 Reactor。它們分別使用不同的 NioEventLoopGroup,主 Reactor 負責處理 Accept,然後把 Channel 註冊到從 Reactor 上,從 Reactor 主要負責 Channel 生命周期內的所有 I/O 事件。

1.2 Demo分析

從上面的Demo代碼可以看出,對於所有用Netty編寫的服務端程序,至少需要兩個部分:

  • 至少一個ChannelHandler
  • Bootstrapping

1)ChannelHandler

這個組件用來實現對客戶端發送過來的數據進行處理,可能包括編解碼、自定義業務邏輯處理等等。

對於ChannelHandler來說,有非常多的實現。在Demo中我們簡單使用了幾個Netty自帶的Handler,包括HttpServerCodec、HttpContentCompressor、HttpObjectAggregator,也使用了一個自定義的EchoServerHandler。

可以看到,對於Handler的使用,是非常重要也是非常方便的一個環節。我們會在以後的文章中詳細展開。

2)Bootstrapping

啟動代碼部分。用來配置服務端的啟動參數,包括監聽端口、服務端線程池配置、網絡連接屬性配置、ChannelHandler配置等等。

結合Demo來看,主要分為這幾個步驟:

  • 創建一個ServerBootstrap實例,用來引導啟動。
  • 創建一個(當我們使用主從Reactor模式時,需要創建兩個)NioEventLoopGroup實例來處理事件, 比如接受一個新的客戶端連接、讀寫數據等。
  • 指定一個端口,用來作為服務端的監聽端口。
  • 使用一系列channelHandler來初始化每個Channel,包括自定義業務邏輯實現的channelHandler。
  • 調用ServerBootstrap.bind() 來真正觸發啟動。

2. Netty的邏輯架構

通過上面的Demo演示,我們對 Netty 的使用已經有了一個大概的印象。

下面,我們根據Demo中使用的幾個組件,一起梳理一下 Netty 的邏輯架構。

從一個Demo開始,揭開Netty的神秘面紗

 

結合我們的Demo和這個邏輯架構圖,我們梳理下各個組件的流轉過程:

  • 服務端利用ServerBootstrap進行啟動引導,綁定監聽端口
  • 啟動初始化時有 main EventLoopGroup 和 child EventLoopGroup 兩個組件,其中 main EventLoopGroup負責監聽網絡連接事件。當有新的網絡連接時,就將 Channel 註冊到 child EventLoopGroup。
  • child EventLoopGroup 會被分配一個 EventLoop 負責處理該 Channel 的讀寫事件。
  • 當客戶端發起 I/O 讀寫事件時,服務端 EventLoop 會進行數據的讀取,然後通過 ChannelPipeline 依次有序觸發各種ChannelHandler進行數據處理。
  • 客戶端數據會被依次傳遞到 ChannelPipeline 的 ChannelInboundHandler 中,在一個handler中處理完後就會傳入下一個handler。
  • 當數據寫回客戶端時,會將處理結果依次傳遞到 ChannelPipeline 的 ChannelOutboundHandler 中,在一個handler中處理完後就會傳入下一個handler,最後返回客戶端。

以上便是 Netty 各個組件的邏輯架構,我們暫時只需要了解個大致框架即可,後面我們會詳細介紹各個組件。

有幾個比較常見的問題在這裡總結下:

1)什麼是Channel
Channel 的字面意思是「通道」,它是網絡通信的載體,提供了基本的 API 用於網絡 I/O 操作,如 register、bind、connect、read、write、flush 等。

Netty 實現的 Channel 是以 JDK NIO Channel 為基礎的,提供了更高層次的抽象,屏蔽了底層 Socket。

2)什麼是ChannleHandler和ChannelPipeline

ChannelHandler實現對客戶端發送過來的數據進行處理,可能包括編解碼、自定義業務邏輯處理等等。

ChannelPipeline 負責組裝各種 ChannelHandler,當 I/O 讀寫事件觸發時,ChannelPipeline 會依次調用 ChannelHandler 列表對 Channel 的數據進行攔截和處理。

3)什麼是EventLoopGroup?

EventLoopGroup 本質是一個線程池, 是 Netty Reactor 線程模型的具體實現方式,主要負責接收 I/O 請求,並分配線程執行處理請求。我們在demo中使用了它的實現類 NioEventLoopGroup,也是 Netty 中最被推薦使用的線程模型。

我們還通過構建main EventLoopGroup 和 child EventLoopGroup 實現了 「主從Reactor模式」。

4)EventLoopGroup、EventLoop、Channel有什麼關係?

一個 EventLoopGroup 往往包含一個或者多個 EventLoop。

EventLoop 用於處理 Channel 生命周期內的所有 I/O 事件,如 accept、connect、read、write 等 I/O 事件。

EventLoop 同一時間會與一個線程綁定,每個 EventLoop 負責處理多個 Channel。


參考書目:
《Netty in Action》

 

都看到最後了,原創不易,點個關注,點個贊吧~

文章持續更新,可以微信搜索「阿丸筆記 」第一時間閱讀,回復【筆記】獲取Canal、MySQL、HBase、JAVA實戰筆記,回復【資料】獲取一線大廠面試資料。

知識碎片重新梳理,構建Java知識圖譜:github.com/saigu/JavaK…(歷史文章查閱非常方便)

Tags: