2. 程式人生 > 實用技巧 >協程在io多路複用中的應用

協程在io多路複用中的應用

阿新 • • 發佈：2020-10-15

阻塞式IO

在這裡插入圖片描述

  • socket的所有操作都由作業系統來提供,也就是通過系統呼叫來完成

  • 每建立一個socket,就會在檔案描述符表中對應增加一條記錄,而返回給應用程式的只有一個socket描述符,每個TCPsocket建立的時候,作業系統都會為它分配讀緩衝區和寫緩衝區

  • 要獲得資料就要從讀緩衝區讀取過來,同樣的要通過socket傳送資料,就要寫入些緩衝區

在這裡插入圖片描述

  • 當要寫入的資料沒有地方,或者讀取的資料沒有時候,就要有cpu一致在阻塞的等待,這就是阻塞式IO

在高併發場景下傢俱排程開銷

非阻塞式IO

就是讓出cpu,需要頻繁的檢查socket是否可讀可寫

[外鏈圖片轉存失敗,源站可能有防盜鏈機制,建議將圖片儲存下來直接上傳(img-j8UMZ9Gy-1602686263692)(gorutine.assets/image-20201014221251560.png)]

IO多路複用

將要監聽的socket加入監聽集合

,這樣就可以通過一次系統呼叫,同時監聽多個socket,有socket就緒了,就可以逐個執行了,既不會為等待某個socket而阻塞,也不會陷入忙等待之中

在這裡插入圖片描述

Select IO多路複用

在這裡插入圖片描述

  • 開啟檔案描述符個數為1024個
  • 每次都要傳入所有監聽集合來看是否有就緒的socket
  • 每次都要便利所有集合才知道哪個socket就緒

poll IO多路複用

可開啟的檔案描述符個數為最多的檔案描述符個數

其他依然存在

epoll IO多路複用

在這裡插入圖片描述

每個socke它有自己的資料結構,新增或者刪除的時候都會傳入一個結構體,epoll——wait等待就緒結果

問題

  • 一個socket可讀,但是隻讀到半個socket請求,沒讀完

在這裡插入圖片描述

在這裡插入圖片描述
面向協程排程

  • 如果是用於監聽埠的fd就緒了,就建立連線建立一個新的fd,交給一個協程來負責

在這裡插入圖片描述

封裝

在這裡插入圖片描述

相關推薦

協程在io多路複用中的應用

阻塞式IO 在這裡插入圖片描述 socket的所有操作都由作業系統來提供,也就是通過系統呼叫來完成每建立一個socket,就會在檔案描述符表中對應增加一條記錄,而返回給應用程式的只有一個socket描述符,每個TCPsoc

IO多路複用 基於IO的單執行緒併發 協程

https://www.cnblogs.com/nianshaoyouwei/p/9642991.html 一. IO多路複用 　　檢測多個socket是否已經發生變化(是否已經連線成功/是否已經獲取資料)(可讀/可寫)

程序、執行緒、協程 程序間的通訊方式 IO多路複用的方式

程序： 程序是系統進行資源分配和排程的⼀個獨立單位，一個程式在一個數據集中的一次動態執行過程，可以簡單理解為“正在執行的程式”。 程序一般由程式、資料集、程序控制塊三部分組成 程式用來描述程序要

面試中的 IO 多路複用

轉載：https://mp.weixin.qq.com/s/iVfLZJ89UMtu3Z5IgpoCoQ 1、什麼是IO多路複用 「定義」 IO多路複用是一種同步IO模型，實現一個執行緒可以監視多個檔案控制代碼；一旦某個檔案控制代碼就緒，就能夠通知應用程式進

Redis中的IO多路複用機制

引言 提起Redis，我們經常會說其底層是一個單執行緒模型，但這是不嚴謹的。Redis 單執行緒指的是網路請求模組使用了一個執行緒，即一個執行緒處理所有網路請求，其他模組仍用了多個執行緒。既然是單執行緒模型，那麼

淺析redis中的IO多路複用與事件機制

【Redis5原始碼學習】 redisphpc快取 釋出於 2019-09-01 baiyan 引入 讀這篇文章之前請先閱讀：淺析伺服器併發IO效能提升之路—從網路程式設計基礎到epoll，以更好的理解本文的內容，謝謝。我們知道，我們在使用

徹底理解 IO多路複用

目錄 1、什麼是IO多路複用?2、為什麼出現IO多路複用機制?3、IO多路複用的三種實現方式4、select函式介面5、select使用示例6、select缺點7、poll函式介面8、poll使用示例9、poll缺點10、epoll函式介面11、epoll使用示

十六、 IO多路複用,非同步非阻塞

總結: 與實現twisted或tornado的原理類似,通過理解這個程式碼,能實現其他非同步框架的理解

io 多路複用機制詳解

　　伺服器端程式設計經常需要構造高效能的IO模型，常見的IO模型有四種： 　　（1）同步阻塞IO（BlockingIO）：即傳統的IO模型。

python IO多路複用之Select

import select,socket,queue server = socket.socket() server.bind((\'localhost\',9000)) server.listen(1000)

python之IO多路複用（二）——select、poll、epoll詳解

select，poll，epoll都是IO多路複用的機制。I/O多路複用就是通過一種機制使一個程序可以監視多個描述符，一旦某個描述符就緒（一般是讀就緒或者寫就緒），能夠通知程式進行相應的讀寫操作。

Redis效能為什麼這麼好？IO多路複用模型瞭解下

點選上方“一點教程”，星標公眾號精品原始碼，第一時間送達 Redis效能為什麼這麼好？IO多路複用模型從底層瞭解下

IO多路複用

概要 使用非阻塞IO 的應用程式通常使用IO多路複用函式 查詢裝置是否可以立即訪問。IO多路複用 對應的驅動需要實現檔案操作的POLL()函式。

【轉】IO多路複用之poll

原文：https://blog.51cto.com/lingdandan/1783952 ____________________________________________ poll提供的功能與select類似,與select在本質上沒有多大差別，管理多個描述符也是進行輪詢，但poll比select的優點

IO多路複用之select,poll,epoll分析

技術標籤：linux 一：select int select (int maxfd + 1, fd_set *readset, fd_set *writeset, fd_set *exceptset, const struct timeval * timeout);

使用IO多路複用完成HTTP請求

import socket from urllib.parse import urlparse from selectors import DefaultSelector, EVENT_READ, EVENT_WRITE

什麼是IO多路複用？用來解決什麼問題？如何實現？

技術標籤：網路程式設計併發 白話IO多路複用 這裡引述知乎大佬對於IO多路複用的機場空管的比喻和理解：

阻塞IO和非阻塞IO及IO多路複用介紹

阻塞IO 在linux中，預設情況下所有的socket都是blocking 當用戶程序呼叫了recvfrom這個系統呼叫，kernel就開始了IO的第一個階段：準備資料。對於network io來說，很多時候資料在一開始還沒有到達（比如，還沒有收到一

【網路IO系列】IO的五種模型，BIO、NIO、AIO、IO多路複用、 訊號驅動IO

前言 在上一篇文章中，我們瞭解了作業系統中核心程式和使用者程式之間的區別和聯絡，還提到了核心空間和使用者空間，當我們需要讀取一條資料的時候，首先需要發請求告訴核心，我需要什麼資料，等核心準備好資料之後

IO多路複用詳解

假如你想了解IO多路複用，那本文或許可以幫助你 本文的最大目的就是想要把select、epoll在執行過程中幹了什麼敘述出來，所以具體的程式碼不會涉及，畢竟不同語言的介面有所區別。