亚洲中字慕日产2020,大陆极品少妇内射AAAAAA,无码av大香线蕉伊人久久,久久精品国产亚洲av麻豆网站

資訊專欄INFORMATION COLUMN

Node - 異步IO和事件循環(huán)

MyFaith / 2736人閱讀

摘要:它是在的基礎上改進的一種方案,通過對文件描述符上的事件狀態(tài)進行判斷。檢索新的事件執(zhí)行與相關的回調幾乎所有情況下,除了關閉的回調函數(shù),它們由計時器和排定的之外,其余情況將在此處阻塞。執(zhí)行事件的,例如或者。

前言

學習Node就繞不開異步IO, 異步IO又與事件循環(huán)息息相關, 而關于這一塊一直沒有仔細去了解整理過, 剛好最近在做項目的時候, 有了一些思考就記錄了下來, 希望能盡量將這一塊的知識整理清楚, 如有錯誤, 請指點輕噴~~

一些概念 同步異步 & 阻塞非阻塞

查閱資料的時候, 發(fā)現(xiàn)很多人都對異步和非阻塞的概念有點混淆, 其實兩者是完全不同的, 同步異步指的是行為即兩者之間的關系, 而阻塞非阻塞指的是狀態(tài)即某一方。

以前端請求為一個例子,下面的代碼很多人都應該寫過

$.ajax(url).succedd(() => {
    ......
    // to do something
})

同步異步
如果是同步的話, 那么應該是client發(fā)起請求后, 一直等到serve處理請求完成后才返回繼續(xù)執(zhí)行后續(xù)的邏輯, 這樣client和serve之間就保持了同步的狀態(tài)。

如果是異步的話, 那么應該是client發(fā)起請求后, 立即返回, 而請求可能還沒有到達server端或者請求正在處理, 當然在異步情況下, client端通常會注冊事件來處理請求完成后的情況, 如上面的succeed函數(shù)。

阻塞非阻塞
首先需要明白一個概念, Js是單線程, 但是瀏覽器并不是, 事實上你的請求是瀏覽器的另一個線程在跑。

如果是阻塞的話, 那么該線程就會一直等到這個請求完成之后才能被釋放用于其他請求

如果是非阻塞的話, 那么該線程就可以發(fā)起請求后而不用等請求完成繼續(xù)做其他事情

總結
之所以經(jīng)常會混亂是因為沒有說清楚討論的是哪一部分(下面會提到), 所以同步異步討論的對象是雙方, 而阻塞非阻塞討論的對象是自身

IO和CPU

Io和Cpu是可以同時進行工作的。

IO:

I/O(英語:Input/Output),即輸入/輸出,通常指數(shù)據(jù)在內部存儲器和外部存儲器或其他周邊設備之間的輸入和輸出。

cpu

解釋計算機指令以及處理計算機軟件中的數(shù)據(jù)。
Node中的異步IO模型

IO分為磁盤IO和網(wǎng)絡IO, 其具有兩個步驟

等待數(shù)據(jù)準備 (Waiting for the data to be ready)

將數(shù)據(jù)從內核拷貝到進程中 (Copying the data from the kernel to the process)

Node中的磁盤Io

以下的討論基于*nix系統(tǒng)。
理想的異步Io應該像上面討論的一樣, 如圖:

而實際上, 我們的系統(tǒng)并不能完美的實現(xiàn)這樣的一種調用方式, Node的異步IO, 如讀取文件等采用的是線程池的方式來實現(xiàn), 可以看到, Node通過另外一個線程來進行Io操作, 完成后再通知主線程:

而在window下, 則是利用IOCP接口來完成, IOCP從用戶的角度來說確實是完美的異步調用方式, 而實際也是利用內核中的線程池, 其與nix系統(tǒng)的不同在于后者的線程池是用戶層提供的線程池。

Node中的網(wǎng)絡Io

在進入主題之前, 我們先了解下Linux的Io模式, 這里推薦大家看這篇文章, 大致總結如下:

阻塞 I/O(blocking IO)

所以,blocking IO的特點就是在IO執(zhí)行的兩個階段都被block了。

非阻塞 I/O(nonblocking IO)

當用戶進程發(fā)出read操作時,如果kernel中的數(shù)據(jù)還沒有準備好,那么它并不會block用戶進程,而是立刻返回一個error。從用戶進程角度講 ,它發(fā)起一個read操作后,并不需要等待,而是馬上就得到了一個結果。用戶進程判斷結果是一個error時,它就知道數(shù)據(jù)還沒有準備好,于是它可以再次發(fā)送read操作。一旦kernel中的數(shù)據(jù)準備好了,并且又再次收到了用戶進程的system call,那么它馬上就將數(shù)據(jù)拷貝到了用戶內存,然后返回。

I/O 多路復用( IO multiplexing)

所以,I/O 多路復用的特點是通過一種機制一個進程能同時等待多個文件描述符,而這些文件描述符(套接字描述符)其中的任意一個進入讀就緒狀態(tài),select()函數(shù)就可以返回。

異步 I/O(asynchronous IO)

用戶進程發(fā)起read操作之后,立刻就可以開始去做其它的事。而另一方面,從kernel的角度,當它受到一個asynchronous read之后,首先它會立刻返回,所以不會對用戶進程產生任何block。然后,kernel會等待數(shù)據(jù)準備完成,然后將數(shù)據(jù)拷貝到用戶內存,當這一切都完成之后,kernel會給用戶進程發(fā)送一個signal,告訴它read操作完成了。

而在Node中, 采用的是I/O 多路復用的模式, 而在I/O多路復用的模式中, 又具有read, select, poll, epoll等幾個子模式, Node采用的是最優(yōu)的epoll模式, 這里簡單說下其中的區(qū)別, 并且解釋下為什么epoll是最優(yōu)的。

read
read。它是一種最原始、性能最低的一種,它會重復檢查I/O的狀態(tài)來完成數(shù)據(jù)的完整讀取。在得到最終數(shù)據(jù)前,CPU一直耗用在I/O狀態(tài)的重復檢查上。圖1是通過read進行輪詢的示意圖。

select
select。它是在read的基礎上改進的一種方案,通過對文件描述符上的事件狀態(tài)進行判斷。圖2是通過select進行輪詢的示意圖。select輪詢具有一個較弱的限制,那就是由于它采用一個1024長度的數(shù)組來存儲狀態(tài),也就是說它最多可以同時檢查1024個文件描述符。

poll
poll。poll比select有所改進,采用鏈表的方式避免數(shù)組長度的限制,其次它可以避免不必要的檢查。但是文件描述符較多的時候,它的性能是十分低下的。

epoll
該方案是Linux下效率最高的I/O事件通知機制,在進入輪詢的時候如果沒有檢查到I/O事件,將會進行休眠,直到事件發(fā)生將它喚醒。它是真實利用了事件通知,執(zhí)行回調的方式,而不是遍歷查詢,所以不會浪費CPU,執(zhí)行效率較高。

除此之外, 另外的poll和select還具有以下的缺點(引用自文章):

每次調用select,都需要把fd集合從用戶態(tài)拷貝到內核態(tài),這個開銷在fd很多時會很大

同時每次調用select都需要在內核遍歷傳遞進來的所有fd,這個開銷在fd很多時也很大

select支持的文件描述符數(shù)量太小了,默認是1024

epoll對于上述的改進

epoll既然是對select和poll的改進,就應該能避免上述的三個缺點。那epoll都是怎么解決的呢?在此之前,我們先看一下epoll和select和poll的調用接口上的不同,select和poll都只提供了一個函數(shù)——select或者poll函數(shù)。而epoll提供了三個函數(shù),epoll_create,epoll_ctl和epoll_wait,epoll_create是創(chuàng)建一個epoll句柄;epoll_ctl是注冊要監(jiān)聽的事件類型;epoll_wait則是等待事件的產生。
  對于第一個缺點,epoll的解決方案在epoll_ctl函數(shù)中。每次注冊新的事件到epoll句柄中時(在epoll_ctl中指定EPOLL_CTL_ADD),會把所有的fd拷貝進內核,而不是在epoll_wait的時候重復拷貝。epoll保證了每個fd在整個過程中只會拷貝一次。
  對于第二個缺點,epoll的解決方案不像select或poll一樣每次都把current輪流加入fd對應的設備等待隊列中,而只在epoll_ctl時把current掛一遍(這一遍必不可少)并為每個fd指定一個回調函數(shù),當設備就緒,喚醒等待隊列上的等待者時,就會調用這個回調函數(shù),而這個回調函數(shù)會把就緒的fd加入一個就緒鏈表)。epoll_wait的工作實際上就是在這個就緒鏈表中查看有沒有就緒的fd(利用schedule_timeout()實現(xiàn)睡一會,判斷一會的效果,和select實現(xiàn)中的第7步是類似的)。
  對于第三個缺點,epoll沒有這個限制,它所支持的FD上限是最大可以打開文件的數(shù)目,這個數(shù)字一般遠大于2048,舉個例子,在1GB內存的機器上大約是10萬左右,一般來說這個數(shù)目和系統(tǒng)內存關系很大。

Node中的異步網(wǎng)絡Io就是利用了epoll來實現(xiàn), 簡單來說, 就是利用一個線程來管理眾多的IO請求, 通過事件機制實現(xiàn)消息通訊。

事件循環(huán)

理解了Node中磁盤IO和網(wǎng)絡IO的底層實現(xiàn)后, 基于上面的代碼, 可以看出Node是基于事件注冊的方式在完成Io后進行一系列的處理, 其內部是利用了事件循環(huán)的機制。

關于事件循環(huán), 是指JS在每次執(zhí)行完同步任務后會檢查執(zhí)行棧是否為空, 是的話就會去執(zhí)行注冊的事件列表, 不斷的循環(huán)該過程。Node中的事件循環(huán)有六個階段:

其中的每個階段都會處理相關的事件:

timers: 執(zhí)行setTimeout和setInterval中到期的callback。

pending callback: 執(zhí)行延遲到下一個循環(huán)迭代的 I/O 回調。

idle, prepare:僅系統(tǒng)內部使用。

poll:檢索新的 I/O 事件;執(zhí)行與 I/O 相關的回調(幾乎所有情況下,除了關閉的回調函數(shù),它們由計時器和 setImmediate() 排定的之外),其余情況 node 將在此處阻塞。(即本文的內容相關))

check: setImmediate() 回調函數(shù)在這里執(zhí)行。

close callbacks: 執(zhí)行close事件的callback,例如socket.on("close"[,fn])或者http.server.on("close, fn)。

ok, 這樣就解釋了Node是如何執(zhí)行我們注冊的事件, 那么還缺少一個環(huán)節(jié), Node又是怎么把事件和IO請求對應起來呢? 這里涉及到了另外一種中間產物請求對象。
以打開一個文件為例子:

fs.open = function(path, flags, mode, callback){

//...

binding.open(pathModule._makeLong(path), stringToFlags(flags), mode, callback);

}

fs.open()的作用是根據(jù)指定路徑和參數(shù)去打開一個文件,從而得到一個文件描述符,這是后續(xù)所有I/O操作的初始操作。從前面的代碼中可以看到,JavaScript層面的代碼通過調用C++核心模塊進行下層的操作。

從JavaScript調用Node的核心模塊,核心模塊調用C++內建模塊,內建模塊通過libuv進行系統(tǒng)調用,這是Node里經(jīng)典的調用方式。這里libuv作為封裝層,有兩個平臺的實現(xiàn),實質上是調用了uv_fs_open()方法。在uv_fs_open()的調用過程中,我們創(chuàng)建了一個FSReqWrap請求對象。從JavaScript層傳入的參數(shù)和當前方法都被封裝在這個請求對象中,其中我們最為關注的回調函數(shù)則被設置在這個對象的oncomplete_sym屬性上:
req_wrap->object_->Set(oncomplete_sym, callback);
QueueUserWorkItem()方法接受3個參數(shù):第一個參數(shù)是將要執(zhí)行的方法的引用,這里引用的uv_fs_thread_proc;第二個參數(shù)是uv_fs_thread_proc方法運行時所需要的參數(shù);第三個參數(shù)是執(zhí)行的標志。當線程池中有可用線程時,我們會調用uv_fs_thread_proc()方法。uv_fs_thread_proc()方法會根據(jù)傳入?yún)?shù)的類型調用相應的底層函數(shù)。以uv_fs_open()為例,實際上調用fs_open()方法。

至此,JavaScript調用立即返回,由JavaScript層面發(fā)起的異步調用的第一階段就此結束。JavaScript線程可以繼續(xù)執(zhí)行當前任務的后續(xù)操作。當前的I/O操作在線程池中等待執(zhí)行,不管它是否阻塞I/O,都不會影響到JavaScript線程的后續(xù)執(zhí)行,如此就達到了異步的目的。

請求對象是異步I/O過程中的重要中間產物,所有的狀態(tài)都保存在這個對象中,包括送入線程池等待執(zhí)行以及I/O操作完畢后的回調處理。
關于這一塊其實個人認為不用過于細究, 大致上知道有這么一個請求對象即可, 最后總結一下整個異步IO的流程:

圖引用自深入淺出NodeJs

至此, Node的整個異步Io流程都已經(jīng)清晰了, 它是依賴于IO線程池epoll、事件循環(huán)、請求對象共同構成的一個管理機制。

Node為什么更適合IO密集

Node為人津津樂道的就是它更適合IO密集型的系統(tǒng), 并且具有更好的性能, 關于這一點其實與它的異步IO息息相關。

對于一個request而言, 如果我們依賴io的結果, 異步io和同步阻塞io(每線程/每請求)都是要等到io完成才能繼續(xù)執(zhí)行. 而同步阻塞io, 一旦阻塞就不會在獲得cpu時間片, 那么為什么異步的性能更好呢?

其根本原因在于同步阻塞Io需要為每一個請求創(chuàng)建一個線程, 在Io的時候, 線程被block, 雖然不消耗cpu, 但是其本身具有內存開銷, 當大并發(fā)的請求到來時, 內存很快被用光, 導致服務器緩慢, 在加上, 切換上下文代價也會消耗cpu資源。而Node的異步Io是通過事件機制來處理的, 它不需要為每一個請求創(chuàng)建一個線程, 這就是為什么Node的性能更高。

特別是在Web這種IO密集型的情形下更具優(yōu)勢, 除開Node之外, 其實還有另外一種事件機制的服務器Ngnix, 如果明白了Node的機制對于Ngnix應該會很容易理解, 有興趣的話推薦看這篇文章。

總結

在真正的學習Node異步IO之前, 經(jīng)??吹揭恍╆P于Node適不適合作為服務器端的開發(fā)語言的爭論, 當然也有很多片面的說法。
其實, 關于這個問題還是取決于你的業(yè)務場景。

假設你的業(yè)務是cpu密集型的, 那你采用Node來開發(fā), 肯定是不適合的。 為什么不適合? 因為Node是單線程, 你被阻塞在計算的時候, 其他的事件就做不了, 處理不了請求, 也處理不了回調。

那么在IO密集型中, Node就比Java好嗎? 其實也不一定, 還是要取決于你的業(yè)務。 如果你的業(yè)務是非常大的并發(fā), 但是你的服務器資源又有限, 就好比現(xiàn)在有個入口, Node可以一次進10個人, 而Java依次排隊進一個人, 如果是10個人同時進, 當然是Node更具有優(yōu)勢, 但是假設有100個人(如1w個異步請求之類)的話, 那么Node就會因為它的異步機制導致應用被掛起,內存狂飆,IO堵塞,而且不可恢復,這個時候你只能重啟了。而Java卻可以有序的處理, 雖然會慢一點。 而一臺服務器掛了造成的線上事故的損失更是不可衡量的。(當然, 如果服務器資源足夠的話, Node也能處理)。

最后, 事實上Java也是具有異步IO的庫, 只是相對來說, Node的語法更自然更貼近, 也就更適合。

參考&引用

怎樣理解阻塞非阻塞與同步異步的區(qū)別?
Linux epoll & Node.js Event Loop & I / O復用
node.js應用高并發(fā)高性能的核心關鍵本質是什么?
Linux IO模式及 select、poll、epoll詳解
異步IO比同步阻塞IO性能更好嗎?為什么?
深入淺出Nodejs

文章版權歸作者所有,未經(jīng)允許請勿轉載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉載請注明本文地址:http://www.ezyhdfw.cn/yun/104069.html

相關文章

  • node.js的異步IO 第一篇

    摘要:給出了解決方案就是單線程,遠離線程鎖,狀態(tài)同步的問題,使用異步讓單線程遠離阻塞,高效利用。而實際上的異步是采用了線程池技術,發(fā)起異步時,把操作扔到線程池里面執(zhí)行,然后主線程繼續(xù)執(zhí)行其他操作,執(zhí)行完畢通過線程間通信通知主線程,主線程執(zhí)行回調。 異步IO,事件驅動,單線程構成了node的基調,為什么異步IO在node中如此重要呢? 我們先來說一下異步的概念,異步常見于前端開發(fā),例如ajax...

    feng409 評論0 收藏0
  • JavaScript單線程事件循環(huán)(Event Loop)那些事

    摘要:概述本篇主要介紹的運行機制單線程事件循環(huán)結論先在中利用運行至完成和非阻塞完成單線程下異步任務的處理就是先處理主模塊主線程上的同步任務再處理異步任務異步任務使用事件循環(huán)機制完成調度涉及的內容有單線程事件循環(huán)同步執(zhí)行異步執(zhí)行定時器的事件循環(huán)開始 1.概述 本篇主要介紹JavaScript的運行機制:單線程事件循環(huán)(Event Loop). 結論先: 在JavaScript中, 利用運行至...

    Shisui 評論0 收藏0
  • node - 非阻塞的異步 IO

    摘要:而線程是進程的一部分,二者相扶相依,其中單線程被稱為輕權進程或輕量級進程,執(zhí)行特性線程只有個基本狀態(tài)就緒,執(zhí)行,阻塞。以上所述證明了操作與其他函數(shù)的這種區(qū)別是由實現(xiàn),是用多線程的方式,在標準的阻塞式上模擬非阻塞異步,線程池默認限制四線程。 node - 非阻塞的異步 IO 每當我們提起 node.js 時總會脫口而出 事件驅動、非阻塞I/O 和 單線程,所以我總結了以下幾點對這三項概念...

    yuxue 評論0 收藏0
  • node - 非阻塞的異步 IO

    摘要:而線程是進程的一部分,二者相扶相依,其中單線程被稱為輕權進程或輕量級進程,執(zhí)行特性線程只有個基本狀態(tài)就緒,執(zhí)行,阻塞。以上所述證明了操作與其他函數(shù)的這種區(qū)別是由實現(xiàn),是用多線程的方式,在標準的阻塞式上模擬非阻塞異步,線程池默認限制四線程。 node - 非阻塞的異步 IO 每當我們提起 node.js 時總會脫口而出 事件驅動、非阻塞I/O 和 單線程,所以我總結了以下幾點對這三項概念...

    keelii 評論0 收藏0

發(fā)表評論

0條評論

MyFaith

|高級講師

TA的文章

閱讀更多
最新活動
閱讀需要支付1元查看
<