自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

深入理解Python中的ThreadLocal變量(上)

開發(fā) 前端
有時候使用局部變量不太方便,因此 python 還提供了 ThreadLocal 變量,它本身是一個全局變量,但是每個線程卻可以利用它來保存屬于自己的私有數(shù)據(jù),這些私有數(shù)據(jù)對其他線程也是不可見的。

【引自selfboot 的博客】我們知道多線程環(huán)境下,每一個線程均可以使用所屬進程的全局變量。如果一個線程對全局變量進行了修改,將會影響到其他所有的線程。為了避免多個線程同時對變量進行修改,引入了線程同步機制,通過互斥鎖,條件變量或者讀寫鎖來控制對全局變量的訪問。

只用全局變量并不能滿足多線程環(huán)境的需求,很多時候線程還需要擁有自己的私有數(shù)據(jù),這些數(shù)據(jù)對于其他線程來說不可見。因此線程中也可以使用局部變量,局部變量只有線程自身可以訪問,同一個進程下的其他線程不可訪問。

有時候使用局部變量不太方便,因此 python 還提供了 ThreadLocal 變量,它本身是一個全局變量,但是每個線程卻可以利用它來保存屬于自己的私有數(shù)據(jù),這些私有數(shù)據(jù)對其他線程也是不可見的。下圖給出了線程中這幾種變量的存在情況:

 

線程變量

全局 VS 局部變量

首先借助一個小程序來看看多線程環(huán)境下全局變量的同步問題。

  1. import threading 
  2. global_num = 0 
  3. def thread_cal(): 
  4.     global global_num 
  5.     for i in xrange(1000): 
  6.         global_num += 1 
  7. # Get 10 threads, run them and wait them all finished. 
  8. threads = [] 
  9. for i in range(10): 
  10.     threads.append(threading.Thread(target=thread_cal)) 
  11.     threads[i].start() 
  12. for i in range(10): 
  13.     threads[i].join() 
  14. # Value of global variable can be confused. 
  15. print global_num  

這里我們創(chuàng)建了10個線程,每個線程均對全局變量 global_num 進行1000次的加1操作(循環(huán)1000次加1是為了延長單個線程執(zhí)行時間,使線程執(zhí)行時被中斷切換),當10個線程執(zhí)行完畢時,全局變量的值是多少呢?答案是不確定。簡單來說是因為 global_num += 1 并不是一個原子操作,因此執(zhí)行過程可能被其他線程中斷,導致其他線程讀到一個臟值。以兩個線程執(zhí)行 +1 為例,其中一個可能的執(zhí)行序列如下(此情況下***結(jié)果為1):

 

多線程全局變量同步

多線程中使用全局變量時普遍存在這個問題,解決辦法也很簡單,可以使用互斥鎖、條件變量或者是讀寫鎖。下面考慮用互斥鎖來解決上面代碼的問題,只需要在進行 +1 運算前加鎖,運算完畢釋放鎖即可,這樣就可以保證運算的原子性。

  1. l = threading.Lock() 
  2. ... 
  3.     l.acquire() 
  4.     global_num += 1 
  5.     l.release()  

在線程中使用局部變量則不存在這個問題,因為每個線程的局部變量不能被其他線程訪問。下面我們用10個線程分別對各自的局部變量進行1000次加1操作,每個線程結(jié)束時打印一共執(zhí)行的操作次數(shù)(每個線程均為1000):

  1. def show(num): 
  2.     print threading.current_thread().getName(), num 
  3. def thread_cal(): 
  4.     local_num = 0 
  5.     for _ in xrange(1000): 
  6.         local_num += 1 
  7.     show(local_num) 
  8. threads = [] 
  9. for i in range(10): 
  10.     threads.append(threading.Thread(target=thread_cal)) 
  11.     threads[i].start()  

可以看出這里每個線程都有自己的 local_num,各個線程之間互不干涉。

Thread-local 對象

上面程序中我們需要給 show 函數(shù)傳遞 local_num 局部變量,并沒有什么不妥。不過考慮在實際生產(chǎn)環(huán)境中,我們可能會調(diào)用很多函數(shù),每個函數(shù)都需要很多局部變量,這時候用傳遞參數(shù)的方法會很不友好。

為了解決這個問題,一個直觀的的方法就是建立一個全局字典,保存進程 ID 到該進程局部變量的映射關(guān)系,運行中的線程可以根據(jù)自己的 ID 來獲取本身擁有的數(shù)據(jù)。這樣,就可以避免在函數(shù)調(diào)用中傳遞參數(shù),如下示例:

  1. global_data = {} 
  2. def show(): 
  3.     cur_thread = threading.current_thread() 
  4.     print cur_thread.getName(), global_data[cur_thread] 
  5. def thread_cal(): 
  6.     cur_thread = threading.current_thread() 
  7.     global_data[cur_thread] = 0 
  8.     for _ in xrange(1000): 
  9.         global_data[cur_thread] += 1 
  10.     show()  # Need no local variable.  Looks good. 
  11. ...  

保存一個全局字典,然后將線程標識符作為key,相應線程的局部數(shù)據(jù)作為 value,這種做法并不***。首先,每個函數(shù)在需要線程局部數(shù)據(jù)時,都需要先取得自己的線程ID,略顯繁瑣。更糟糕的是,這里并沒有真正做到線程之間數(shù)據(jù)的隔離,因為每個線程都可以讀取到全局的字典,每個線程都可以對字典內(nèi)容進行更改。

為了更好解決這個問題,python 線程庫實現(xiàn)了 ThreadLocal 變量(很多語言都有類似的實現(xiàn),比如Java)。ThreadLocal 真正做到了線程之間的數(shù)據(jù)隔離,并且使用時不需要手動獲取自己的線程 ID,如下示例:

  1. global_data = threading.local() 
  2. def show(): 
  3.     print threading.current_thread().getName(), global_data.num 
  4. def thread_cal(): 
  5.     global_data.num = 0 
  6.     for _ in xrange(1000): 
  7.         global_data.num += 1 
  8.     show() 
  9. threads = [] 
  10. ... 
  11. print "Main thread: ", global_data.__dict__ # {}  

上面示例中每個線程都可以通過 global_data.num 獲得自己獨有的數(shù)據(jù),并且每個線程讀取到的 global_data 都不同,真正做到線程之間的隔離。

Python通過 local 類來實現(xiàn) ThreadLocal 變量,代碼量不多(只有100多行),但是比較難理解,涉及很多 Python 黑魔法,下篇再來詳細分析。那么 ThreadLocal 很***了?不!Python 的 WSGI 工具庫 werkzeug 中有一個更好的 ThreadLocal 實現(xiàn),甚至支持協(xié)程之間的私有數(shù)據(jù),實現(xiàn)更加復雜,有機會再分析。

深入理解Python中的ThreadLocal變量(中)

 

責任編輯:龐桂玉 來源: selfboot博客
相關(guān)推薦

2016-08-31 15:50:50

PythonThreadLocal變量

2016-11-07 21:59:52

threadpython

2021-05-13 21:27:24

ThreadLocal多線程多線程并發(fā)安全

2020-12-11 07:32:45

編程ThreadLocalJava

2024-07-18 10:12:04

2022-08-21 16:52:27

Linux虛擬內(nèi)存

2020-12-26 16:51:12

Python操作符開發(fā)

2018-07-09 15:11:14

Java逃逸JVM

2020-12-16 09:47:01

JavaScript箭頭函數(shù)開發(fā)

2023-10-08 08:53:36

數(shù)據(jù)庫MySQL算法

2010-06-28 10:12:01

PHP匿名函數(shù)

2014-06-23 10:42:56

iOS開發(fā)UIScrollVie

2010-06-01 15:25:27

JavaCLASSPATH

2016-12-08 15:36:59

HashMap數(shù)據(jù)結(jié)構(gòu)hash函數(shù)

2020-07-21 08:26:08

SpringSecurity過濾器

2013-11-05 13:29:04

JavaScriptreplace

2013-06-20 10:25:56

2018-01-22 17:02:48

Python字符編碼ASCII

2012-11-22 10:11:16

LispLisp教程

2022-02-14 07:47:26

overlayfsdockerrootfs
點贊
收藏

51CTO技術(shù)棧公眾號