快速掌握NIO(上)

本文作者:禹明明脯丝,叩丁狼高級講師。原創(chuàng)文章售睹,轉(zhuǎn)載請注明出處越锈。

NIO概述

NIO是JDK1.4引入的新的IO模型仗嗦,是New I/O的簡稱,現(xiàn)在更多人認(rèn)為應(yīng)該是 Non-blocking(非阻塞) IO的簡稱,NIO提供了比傳統(tǒng)IO更高的性能和更優(yōu)的操作方式

JDK1.4之前我們使用的IO是同步阻塞的,我們可以稱之為BIO(阻塞IO)
JDK1.4Java學(xué)習(xí)了Linux的select模式提供了新的同步非阻塞IO模式NIO(非阻塞IO)
JDK1.7 的NIO2學(xué)習(xí)了Linux的epoll模式才是真正實現(xiàn)了(非阻塞異步IO),我們稱之為AIO,但是由于AIO用的不多,我們就暫不討論

JAVA的IO模型提供了標(biāo)準(zhǔn)輸入輸出(操作文件) 和網(wǎng)絡(luò)編程兩套API瞪浸。
但是NIO對于標(biāo)準(zhǔn)輸入輸出的性能提升并沒有那么明顯(其實IO底層已經(jīng)使用了NIO的技術(shù)重新實現(xiàn)過)儒将,但是對于網(wǎng)絡(luò)編程方面,NIO對性能的提升是非常巨大的,目前非常流行Mina和Netty都是對NIO的一種封裝

NIO標(biāo)準(zhǔn)輸入輸出API

普通的IO我們都非常熟練了,我們來看一個普通IO和NIO復(fù)制文件的代碼對比


 private long testNIO()throws IOException{
        File src = new File("D:/src.txt");
        File dest = new File("D:/dest.txt");
        long startTime = System.currentTimeMillis();

        if(!dest.exists())

            dest.createNewFile();

        RandomAccessFile read =new RandomAccessFile(src,"rw");

        RandomAccessFile write =new RandomAccessFile(dest,"rw");

        FileChannel readChannel = read.getChannel();

        FileChannel writeChannel = write.getChannel();

        ByteBuffer byteBuffer = ByteBuffer.allocate(1024*1024);//1M緩沖區(qū)

        while(readChannel.read(byteBuffer) >0) {

            byteBuffer.flip();//翻轉(zhuǎn)狀態(tài),從寫模式切換到讀模式(必須!)

            writeChannel.write(byteBuffer);

            byteBuffer.clear();//重置Buffer位置,相當(dāng)于清空Buffer,但是只是改變位置指向,不真正刪除數(shù)據(jù)

        }

        writeChannel.close();
        readChannel.close();
        long endTime = System.currentTimeMillis();

        return endTime - startTime;

    }

    public void testIO(){
        File src = new File("D:/src.txt");
        File dest = new File("D:/dest.txt");

        try (
                InputStream in = new FileInputStream(src);
                OutputStream out = new FileOutputStream(dest);
        ) {
            byte[] buffer = new byte[1024];
            int len = -1;
            while ((len = in.read(buffer)) != -1) {
                out.write(buffer, 0, len);
            }
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

這部分我們學(xué)習(xí)一下怎么使用就行对蒲,不做過多討論钩蚊。通常當(dāng)我們提到NIO的時候更多關(guān)注的是網(wǎng)絡(luò)通信部分

網(wǎng)絡(luò)編程API

要了解NIO我們需要對比一下傳統(tǒng) BIO 網(wǎng)絡(luò)通信模型和 NIO通信模型的區(qū)別

先了解一下NIO的三個核心概念:

  • buffer緩沖區(qū)
  • Channel管道
  • Selector選擇器

緩沖區(qū) Buffer

傳統(tǒng)IO是面向stream的,NIO是面向緩沖區(qū)(Buffer)的
Buffer是一個對象,包含一些要寫入或者讀出的數(shù)據(jù)蹈矮。
在NIO庫中砰逻,所有數(shù)據(jù)都是用緩沖區(qū)處理的。在讀取數(shù)據(jù)時泛鸟,它是直接讀到緩沖區(qū)中的.在寫入數(shù)據(jù)時也是寫入到緩沖區(qū)中蝠咆。任何時候訪問NIO中的數(shù)據(jù),都是通過緩沖區(qū)進(jìn)行操作北滥。

具體的緩存區(qū)有這些:ByteBuffe刚操、CharBuffer、 ShortBuffer再芋、IntBuffer菊霜、LongBuffer、FloatBuffer济赎、DoubleBuffer鉴逞。最常用的就是ByteBuffer, 他們實現(xiàn)了相同的接口:Buffer记某。

Buffer中比較重要的4個屬性:position、limit构捡、capacity液南、mark. 在使用 Buffer 時,我們實際操作的就是這四個屬性的值.
具體介紹下4個屬性:

  • capacity(容量):一個buffer能夠容納數(shù)據(jù)元素的最大數(shù)量勾徽,capacity不會為負(fù)數(shù)滑凉,且永遠(yuǎn)不能被改變.
    假設(shè):IntBuffer.allocate(1024), 分配了大小為1024的元素個數(shù),則capacity就等于1024.
  • limit(上界):一個buffer的limit指的是第一個不能在讀也不能在寫的元素索引. limit不會為負(fù)數(shù)捂蕴,并且一定是小于capacity的.
    假設(shè):IntBuffer.allocate(1024), 我們在程序中設(shè)置limit=512譬涡,說明Buffer的容量是1024,但是從512之后既不能讀也不能寫了啥辨,進(jìn)一步說明該Buffer的實際可用大小是512.
  • position(位置):一個buffer的position指的是下一個將要讀或者寫的元素的索引.position不會為負(fù)數(shù),并且一定是小于limit的. position的位置主要由get()和put()方法的調(diào)用來更新.
  • mark(標(biāo)記):一個備忘地址盯腌,作為臨時標(biāo)記位置使用溉知,標(biāo)記在設(shè)定前是未定義的.
    mark的使用場景:
    假設(shè)IntBuffer.allocate(1024),現(xiàn)在position位置為10腕够,現(xiàn)在只想發(fā)送512到1024之間的緩沖數(shù)據(jù)级乍,此時我們可以buffer.mark(buffer.position())既將position記入mark位置,然后buffer.postion(512)帚湘,此時發(fā)送的數(shù)據(jù)就是512到1024之間的數(shù)據(jù)玫荣。發(fā)送完成后,調(diào)用buffer.reset()將mark臨時標(biāo)記賦值給position使得position=mark大诸。注意如果未設(shè)定mark捅厂,而調(diào)用了buffer.reset()方法則會拋出InvalidMarkException.
    不變式:
    0 <= mark <= position <= limit <= capacity
image.png

通道 Channel

我們對數(shù)據(jù)的讀取和寫入要通過Channel,它就像水管一樣资柔,是一個通道焙贷。通道不同于流的地方就是通道是雙向的,可以用于讀贿堰、寫和同時讀寫操作辙芍。

底層的操作系統(tǒng)的通道一般都是全雙工的,所以全雙工的Channel比流能更好的映射底層操作系統(tǒng)的API羹与。

Channel主要分兩大類:

  • SelectableChannel:用戶網(wǎng)絡(luò)讀寫
  • FileChannel:用于文件操作

多路復(fù)用器 Selector

Selector是Java NIO 編程的基礎(chǔ)故硅。
Selector提供選擇已經(jīng)就緒的任務(wù)的能力:Selector會不斷輪詢注冊在其上的Channel,如果某個Channel上面發(fā)生讀或者寫事件纵搁,這個Channel就處于就緒狀態(tài)吃衅,會被Selector輪詢出來,然后通過SelectionKey可以獲取就緒Channel的集合诡渴,進(jìn)行后續(xù)的I/O操作捐晶。

一個Selector可以同時輪詢多個Channel菲语,因為JDK使用了epoll()代替?zhèn)鹘y(tǒng)的select實現(xiàn),所以沒有最大連接句柄1024/2048的限制惑灵。所以山上,只需要一個線程負(fù)責(zé)Selector的輪詢,就可以接入成千上萬的客戶端英支。

  • 下面是普通的BIO通信模型


    image.png

    采用BIO通信模型的服務(wù)端佩憾,通常由一個獨立的Acceptor線程負(fù)責(zé)監(jiān)聽客戶端的連接,它接收到客戶端連接請求之后為每個客戶端創(chuàng)建一個新的線程進(jìn)行鏈路處理干花,處理完成之后妄帘,通過輸出流返回應(yīng)答給客戶端,線程銷毀池凄。Blocking-IO是典型的一請求一應(yīng)答的模型抡驼,每一個Socket的處理過程當(dāng)中都是阻塞的。
    BIO主要的問題在于每當(dāng)有一個新的客戶端請求接入時肿仑,服務(wù)端必須創(chuàng)建一個新的線程來處理這條鏈路致盟,在需要滿足高性能、高并發(fā)的場景是沒法應(yīng)用的(大量創(chuàng)建新的線程會嚴(yán)重影響服務(wù)器性能尤慰,甚至罷工)馏锡。

再來對比一下NIO的模型


image.png

阻塞IO的問題主要體現(xiàn)在三個方面:

  1. 創(chuàng)建大量線程,浪費內(nèi)存
  2. 由于是阻塞模式,線程在等待任務(wù)處理完成的時間都是阻塞的,沒有任何意義
  3. 線程太多,就需要CPU在多個線程之間進(jìn)行切換,浪費大量CPU時間

而NIO的流程并沒有為每一個client都去創(chuàng)建一個線程,而是使用了一個Selector來輪詢已經(jīng)準(zhǔn)備就緒的key(先簡單理解為一個key對應(yīng)一個Channel)伟端,這樣就可以節(jié)省大量的線程和線程切換的開銷而且不會對性能造成太大影響杯道,尤其在多線程高并發(fā)的時候,NIO的性能也不會像IO一樣出現(xiàn)急劇下降甚至宕機责蝠。

拿一個買票例子來說IO和NIO的區(qū)別就是:
IO就相當(dāng)于每個人(線程)都排幾百米的隊党巾,自己去買票,而賣票(任務(wù)處理)的速度是一定的,排隊期間你(線程)做不了任何事情(阻塞),這樣不但無法提高賣票效率,反而容易造成大量擁堵
NIO就是找黃牛買票玛歌,黃牛買到了打電話通知你昧港,而這個黃牛(Selector)同時在為成千上萬個需要買票的人(Channel)服務(wù),哪個票能買了(就緒),黃牛馬上能夠知道,然后就去找到對應(yīng)的客戶(Chanel)去處理

但是NIO缺點也不是沒有支子,那就是API比較復(fù)雜创肥,學(xué)習(xí)成本較高,不好維護(hù)值朋。所以如果是并發(fā)量不高的簡單服務(wù)最好還是使用傳統(tǒng)IO叹侄,方便維護(hù)。而對于高并發(fā)的系統(tǒng)最好采用NIO昨登,但是一般也不會直接使用NIO的原生API趾代,而是使用NIO框架Mina或者Netty

想獲取更多技術(shù)視頻,請前往叩丁狼官網(wǎng):http://www.wolfcode.cn/openClassWeb_listDetail.html

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末丰辣,一起剝皮案震驚了整個濱河市撒强,隨后出現(xiàn)的幾起案子禽捆,更是在濱河造成了極大的恐慌,老刑警劉巖飘哨,帶你破解...
    沈念sama閱讀 222,183評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件胚想,死亡現(xiàn)場離奇詭異,居然都是意外死亡芽隆,警方通過查閱死者的電腦和手機浊服,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來胚吁,“玉大人牙躺,你說我怎么就攤上這事⊥蠓觯” “怎么了孽拷?”我有些...
    開封第一講書人閱讀 168,766評論 0 361
  • 文/不壞的土叔 我叫張陵,是天一觀的道長半抱。 經(jīng)常有香客問我乓搬,道長,這世上最難降的妖魔是什么代虾? 我笑而不...
    開封第一講書人閱讀 59,854評論 1 299
  • 正文 為了忘掉前任,我火速辦了婚禮激蹲,結(jié)果婚禮上棉磨,老公的妹妹穿的比我還像新娘。我一直安慰自己学辱,他們只是感情好乘瓤,可當(dāng)我...
    茶點故事閱讀 68,871評論 6 398
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著策泣,像睡著了一般衙傀。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上萨咕,一...
    開封第一講書人閱讀 52,457評論 1 311
  • 那天统抬,我揣著相機與錄音,去河邊找鬼危队。 笑死聪建,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的茫陆。 我是一名探鬼主播金麸,決...
    沈念sama閱讀 40,999評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼簿盅!你這毒婦竟也來了挥下?” 一聲冷哼從身側(cè)響起揍魂,我...
    開封第一講書人閱讀 39,914評論 0 277
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎棚瘟,沒想到半個月后现斋,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,465評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡解取,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,543評論 3 342
  • 正文 我和宋清朗相戀三年步责,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片禀苦。...
    茶點故事閱讀 40,675評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡蔓肯,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出振乏,到底是詐尸還是另有隱情蔗包,我是刑警寧澤,帶...
    沈念sama閱讀 36,354評論 5 351
  • 正文 年R本政府宣布慧邮,位于F島的核電站调限,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏误澳。R本人自食惡果不足惜耻矮,卻給世界環(huán)境...
    茶點故事閱讀 42,029評論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望忆谓。 院中可真熱鬧裆装,春花似錦、人聲如沸倡缠。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,514評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽昙沦。三九已至琢唾,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間盾饮,已是汗流浹背采桃。 一陣腳步聲響...
    開封第一講書人閱讀 33,616評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留丐谋,地道東北人芍碧。 一個月前我還...
    沈念sama閱讀 49,091評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像号俐,于是被迫代替她去往敵國和親泌豆。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,685評論 2 360

推薦閱讀更多精彩內(nèi)容