自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

Python 中的異步編程:Asyncio

開發(fā) 后端
當使用標準的 sleep方法時,當前線程會掛起等待。什么也不會做。實際上,標準的 sleep 過程中,當前線程也會返回一個 python 的解釋器,可以操作現(xiàn)有的其他線程,但這是另一個話題了。

[[190376]]

異步是怎么一回事?

在傳統(tǒng)的順序編程中, 所有發(fā)送給解釋器的指令會一條條被執(zhí)行。此類代碼的輸出容易顯現(xiàn)和預測。 但是…

譬如說你有一個腳本向3個不同服務器請求數(shù)據(jù)。 有時,誰知什么原因,發(fā)送給其中一個服務器的請求可能意外地執(zhí)行了很長時間。想象一下從第二個服務器獲取數(shù)據(jù)用了10秒鐘。在你等待的時候,整個腳本實際上什么也沒干。如果你可以寫一個腳本可以不去等待第二個請求而是僅僅跳過它,然后開始執(zhí)行第三個請求,然后回到第二個請求,執(zhí)行之前離開的位置會怎么樣呢。就是這樣。你通過切換任務最小化了空轉時間。盡管如此,當你需要一個幾乎沒有I/O的簡單腳本時,你不想用異步代碼。

還有一件重要的事情要提,所有代碼在一個線程中運行。所以如果你想讓程序的一部分在后臺執(zhí)行同時干一些其他事情,那是不可能的。

準備開始

這是 asyncio 主概念最基本的定義:

  • 協(xié)程— 消費數(shù)據(jù)的生成器,但是不生成數(shù)據(jù)。Python 2.5 介紹了一種新的語法讓發(fā)送數(shù)據(jù)到生成器成為可能。我推薦查閱David Beazley “A Curious Course on Coroutines and Concurrency” 關于協(xié)程的詳細介紹。
  • 任務— 協(xié)程調(diào)度器。如果你觀察下面的代碼,你會發(fā)現(xiàn)它只是讓 event_loop 盡快調(diào)用它的_step ,同時 _step 只是調(diào)用協(xié)程的下一步。
  1. class Task(futures.Future):   
  2.     def __init__(self, coro, loop=None): 
  3.         super().__init__(loop=loop) 
  4.         ... 
  5.         self._loop.call_soon(self._step) 
  6.  
  7.     def _step(self): 
  8.             ... 
  9.         try: 
  10.             ... 
  11.             result = next(self._coro) 
  12.         except StopIteration as exc: 
  13.             self.set_result(exc.value) 
  14.         except BaseException as exc: 
  15.             self.set_exception(exc) 
  16.             raise 
  17.         else
  18.             ... 
  19.             self._loop.call_soon(self._step) 
  • 事件循環(huán)— 把它想成 asyncio 的中心執(zhí)行器。

現(xiàn)在我們看一下所有這些如何融為一體。正如我之前提到的,異步代碼在一個線程中運行。

從上圖可知:

1.消息循環(huán)是在線程中執(zhí)行

2.從隊列中取得任務

3.每個任務在協(xié)程中執(zhí)行下一步動作

4.如果在一個協(xié)程中調(diào)用另一個協(xié)程(await <coroutine_name>),會觸發(fā)上下文切換,掛起當前協(xié)程,并保存現(xiàn)場環(huán)境(變量,狀態(tài)),然后載入被調(diào)用協(xié)程

5.如果協(xié)程的執(zhí)行到阻塞部分(阻塞I/O,Sleep),當前協(xié)程會掛起,并將控制權返回到線程的消息循環(huán)中,然后消息循環(huán)繼續(xù)從隊列中執(zhí)行下一個任務...以此類推

6.隊列中的所有任務執(zhí)行完畢后,消息循環(huán)返回***個任務

異步和同步的代碼對比

現(xiàn)在我們實際驗證異步模式的切實有效,我會比較兩段 python 腳本,這兩個腳本除了 sleep 方法外,其余部分完全相同。在***個腳本里,我會用標準的 time.sleep 方法,在第二個腳本里使用 asyncio.sleep 的異步方法。

這里使用 Sleep 是因為它是一個用來展示異步方法如何操作 I/O 的最簡單辦法。

使用同步 sleep 方法的代碼:

  1. import asyncio   
  2. import time   
  3. from datetime import datetime 
  4.  
  5.  
  6. async def custom_sleep():   
  7.     print('SLEEP', datetime.now()) 
  8.     time.sleep(1) 
  9.  
  10. async def factorial(name, number):   
  11.     f = 1 
  12.     for i in range(2, number+1): 
  13.         print('Task {}: Compute factorial({})'.format(name, i)) 
  14.         await custom_sleep() 
  15.         f *= i 
  16.     print('Task {}: factorial({}) is {}\n'.format(name, number, f)) 
  17.  
  18.  
  19. start = time.time()   
  20. loop = asyncio.get_event_loop() 
  21.  
  22. tasks = [   
  23.     asyncio.ensure_future(factorial("A", 3)), 
  24.     asyncio.ensure_future(factorial("B", 4)), 
  25. loop.run_until_complete(asyncio.wait(tasks))   
  26. loop.close() 
  27.  
  28. end = time.time()   
  29. print("Total time: {}".format(end - start)) 

腳本輸出:

  1. Task A: Compute factorial(2)   
  2. SLEEP 2017-04-06 13:39:56.207479   
  3. Task A: Compute factorial(3)   
  4. SLEEP 2017-04-06 13:39:57.210128   
  5. Task A: factorial(3) is 6 
  6.  
  7. Task B: Compute factorial(2)   
  8. SLEEP 2017-04-06 13:39:58.210778   
  9. Task B: Compute factorial(3)   
  10. SLEEP 2017-04-06 13:39:59.212510   
  11. Task B: Compute factorial(4)   
  12. SLEEP 2017-04-06 13:40:00.217308   
  13. Task B: factorial(4) is 24 
  14.  
  15. Total time: 5.016386032104492 

使用異步 Sleep 的代碼:

  1. import asyncio   
  2. import time   
  3. from datetime import datetime 
  4.  
  5.  
  6. async def custom_sleep():   
  7.     print('SLEEP {}\n'.format(datetime.now())) 
  8.     await asyncio.sleep(1) 
  9.  
  10. async def factorial(name, number):   
  11.     f = 1 
  12.     for i in range(2, number+1): 
  13.         print('Task {}: Compute factorial({})'.format(name, i)) 
  14.         await custom_sleep() 
  15.         f *= i 
  16.     print('Task {}: factorial({}) is {}\n'.format(name, number, f)) 
  17.  
  18.  
  19. start = time.time()   
  20. loop = asyncio.get_event_loop() 
  21.  
  22. tasks = [   
  23.     asyncio.ensure_future(factorial("A", 3)), 
  24.     asyncio.ensure_future(factorial("B", 4)), 
  25. loop.run_until_complete(asyncio.wait(tasks))   
  26. loop.close() 
  27.  
  28. end = time.time()   
  29. print("Total time: {}".format(end - start)) 

腳本輸出:

  1. Task A: Compute factorial(2)   
  2. SLEEP 2017-04-06 13:44:40.648665 
  3.  
  4. Task B: Compute factorial(2)   
  5. SLEEP 2017-04-06 13:44:40.648859 
  6.  
  7. Task A: Compute factorial(3)   
  8. SLEEP 2017-04-06 13:44:41.649564 
  9.  
  10. Task B: Compute factorial(3)   
  11. SLEEP 2017-04-06 13:44:41.649943 
  12.  
  13. Task A: factorial(3) is 6 
  14.  
  15. Task B: Compute factorial(4)   
  16. SLEEP 2017-04-06 13:44:42.651755 
  17.  
  18. Task B: factorial(4) is 24 
  19.  
  20. Total time: 3.008226156234741 

從輸出可以看到,異步模式的代碼執(zhí)行速度快了大概兩秒。當使用異步模式的時候(每次調(diào)用 await asyncio.sleep(1) ),進程控制權會返回到主程序的消息循環(huán)里,并開始運行隊列的其他任務(任務A或者任務B)。

當使用標準的 sleep方法時,當前線程會掛起等待。什么也不會做。實際上,標準的 sleep 過程中,當前線程也會返回一個 python 的解釋器,可以操作現(xiàn)有的其他線程,但這是另一個話題了。

推薦使用異步模式編程的幾個理由

很多公司的產(chǎn)品都廣泛的使用了異步模式,如 Facebook 旗下著名的 React Native 和 RocksDB 。像 Twitter 每天可以承載 50 億的用戶訪問,靠的也是異步模式編程。所以說,通過代碼重構,或者改變模式方法,就能讓系統(tǒng)工作的更快,為什么不去試一下呢?

責任編輯:武曉燕 來源: 36大數(shù)據(jù)
相關推薦

2017-08-02 15:00:12

PythonAsyncio異步編程

2020-02-21 08:00:00

Pythonasyncio編程語言

2011-02-22 08:49:16

.NET同步異步

2011-02-22 09:09:21

.NETAsync CTP異步

2023-07-14 15:10:17

PythonAsyncIO庫

2018-10-08 15:35:56

Python異步IO

2023-11-29 07:10:50

python協(xié)程異步編程

2024-12-23 08:00:45

2011-02-24 12:53:51

.NET異步傳統(tǒng)

2023-08-30 08:43:42

asyncioaiohttp

2013-04-01 15:38:54

異步編程異步編程模型

2013-04-01 15:25:41

異步編程異步EMP

2024-04-18 08:20:27

Java 8編程工具

2020-10-15 13:29:57

javascript

2021-08-02 11:13:28

人工智能機器學習技術

2021-12-10 07:47:30

Javascript異步編程

2023-08-01 08:43:29

Python多線程

2017-09-05 08:08:37

asyncio程序多線程

2014-03-31 10:51:40

pythonasyncio

2024-06-04 15:56:48

Task?.NET異步編程
點贊
收藏

51CTO技術棧公眾號