自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

如何在Python 的線程中運(yùn)行協(xié)程

開發(fā) 后端
在一篇文章理解Python異步編程的基本原理這篇文章中,我們講到,如果在異步代碼里面又包含了一段非常耗時(shí)的同步代碼,異步代碼就會(huì)被卡住。

 在一篇文章理解Python異步編程的基本原理這篇文章中,我們講到,如果在異步代碼里面又包含了一段非常耗時(shí)的同步代碼,異步代碼就會(huì)被卡住。

[[315885]]

那么有沒有辦法讓同步代碼與異步代碼看起來也是同時(shí)運(yùn)行的呢?方法就是使用事件循環(huán)的.run_in_executor()方法。

我們來看一下 Python 官方文檔[1]中的說法:

 

那么怎么使用呢?還是以非常耗時(shí)的遞歸方式計(jì)算斐波那契數(shù)列的這個(gè)函數(shù)為例:

 

  1. def sync_calc_fib(n): 
  2.     if n in [1, 2]: 
  3.         return1 
  4.     return sync_calc_fib(n - 1) + sync_calc_fib(n - 2) 
  5.  
  6.  
  7. async def calc_fib(n): 
  8.     result = sync_calc_fib(n) 
  9.     print(f'第 {n} 項(xiàng)計(jì)算完成,結(jié)果是:{result}'
  10.     return result 

我們現(xiàn)在需要用 aiohttp 訪問一個(gè)延遲5秒的網(wǎng)頁(yè),同時(shí)計(jì)算斐波那契數(shù)列第36項(xiàng)。

首先我們看看單獨(dú)計(jì)算第36項(xiàng)需要5秒鐘:

 

我們?cè)賮砜纯慈绻苯影堰@計(jì)算斐波那契數(shù)列和請(qǐng)求網(wǎng)站的兩個(gè)異步任務(wù)放在一起“并行”,實(shí)際時(shí)間是兩個(gè)任務(wù)的時(shí)間疊加:

具體原因我在上一篇文章里面已經(jīng)做了說明。

 

現(xiàn)在,我想讓兩個(gè)任務(wù)“同時(shí)運(yùn)行”,于是就可以這樣修改代碼:

 

  1. import aiohttp 
  2. import asyncio 
  3. import time 
  4. from concurrent.futures import ThreadPoolExecutor 
  5.  
  6.  
  7. async def request(sleep_time): 
  8.     async with aiohttp.ClientSession() as client: 
  9.         resp = await client.get(f'http://127.0.0.1:8000/sleep/{sleep_time}'
  10.         resp_json = await resp.json() 
  11.         print(resp_json) 
  12.  
  13.  
  14. def sync_calc_fib(n): 
  15.     if n in [1, 2]: 
  16.         return 1 
  17.     return sync_calc_fib(n - 1) + sync_calc_fib(n - 2) 
  18.  
  19.  
  20. def calc_fib(n): 
  21.     result = sync_calc_fib(n) 
  22.     print(f'第 {n} 項(xiàng)計(jì)算完成,結(jié)果是:{result}'
  23.     return result 
  24.  
  25.  
  26. async def main(): 
  27.     start = time.perf_counter() 
  28.     loop = asyncio.get_event_loop() 
  29.     with ThreadPoolExecutor(max_workers=4) as executor: 
  30.         tasks_list = [ 
  31.             loop.run_in_executor(executor, calc_fib, 36), 
  32.             asyncio.create_task(request(5)) 
  33.         ] 
  34.         await asyncio.gather(*tasks_list) 
  35.         end = time.perf_counter() 
  36.         print(f'總計(jì)耗時(shí):{end - start}'
  37.  
  38.  
  39. asyncio.run(main()) 

運(yùn)行效果如下圖所示:

 

在5秒鐘的時(shí)間,就把計(jì)算斐波那契數(shù)列和請(qǐng)求5秒延遲的網(wǎng)站都做完了。

實(shí)現(xiàn)這樣的轉(zhuǎn)變,關(guān)鍵的代碼就是:loop.run_in_executor(executor, calc_fib, 36)

其中的 loop就是主線程的事件循環(huán)(event loop),它是用來調(diào)度同一個(gè)線程里面的多個(gè)協(xié)程。

executor是我們使用ThreadPoolExecutor(max_workers=4)創(chuàng)建的一個(gè)有4個(gè)線程的線程池,calc_fib是一個(gè)耗時(shí)的同步函數(shù),36是傳入calc_fib的參數(shù)。loop.run_in_executor(executor, calc_fib, 36)的意思是說:

  1. 把calc_fib函數(shù)放到線程池里面去運(yùn)行
  2. 給線程池增加一個(gè)回調(diào)函數(shù),這個(gè)回調(diào)函數(shù)會(huì)在運(yùn)行結(jié)束后的下一次事件循環(huán)把結(jié)果保存下來。

請(qǐng)注意上圖中紅色箭頭對(duì)應(yīng)的calc_fib這是一個(gè)同步函數(shù),請(qǐng)與上一篇文章中的異步函數(shù)區(qū)分開。run_in_executor的第二個(gè)參數(shù)需要是一個(gè)同步函數(shù)的函數(shù)名。

在上面的例子中,我們創(chuàng)建的是有4個(gè)線程的線程池。所以這個(gè)線程池最多允許4個(gè)阻塞式的同步函數(shù)“并行”。

責(zé)任編輯:華軒 來源: 未聞Code
相關(guān)推薦

2021-09-16 09:59:13

PythonJavaScript代碼

2020-04-07 11:10:30

Python數(shù)據(jù)線程

2020-11-29 17:03:08

進(jìn)程線程協(xié)程

2021-04-25 09:36:20

Go協(xié)程線程

2024-02-05 09:06:25

Python協(xié)程Asyncio庫(kù)

2023-10-12 09:46:00

并發(fā)模型線程

2017-09-22 16:08:16

Python協(xié)程編程

2021-12-09 06:41:56

Python協(xié)程多并發(fā)

2023-10-11 07:39:58

Java虛擬線程

2023-11-26 18:35:25

Python編程語(yǔ)言

2023-11-17 11:36:59

協(xié)程纖程操作系統(tǒng)

2022-04-15 08:54:39

PythonAsync代碼

2017-09-06 09:26:03

Python生成器協(xié)程

2020-11-30 08:25:41

程序員高并發(fā)協(xié)程

2022-04-08 07:32:24

JavaJUCThreadLoca

2020-08-04 10:56:09

進(jìn)程線程協(xié)程

2023-12-05 13:46:09

解密協(xié)程線程隊(duì)列

2023-05-10 07:47:08

Python并發(fā)編程

2017-06-15 13:15:39

Python協(xié)程

2024-06-27 07:56:49

點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)