
舉例講解Python中的死鎖、可重入鎖和互斥鎖
一、死鎖
簡單來說,死鎖是一個資源被多次調(diào)用,而多次調(diào)用方都未能釋放該資源就會造成死鎖,這里結(jié)合例子說明下兩種常見的死鎖情況。
1、迭代死鎖
該情況是一個線程“迭代”請求同一個資源,直接就會造成死鎖:
import threading
import time
class MyThread(threading.Thread):
def run(self):
global num
time.sleep(1)
if mutex.acquire(1):
num = num+1
msg = self.name+' set num to '+str(num)
print msg
mutex.acquire()
mutex.release()
mutex.release()
num = 0
mutex = threading.Lock()
def test():
for i in range(5):
t = MyThread()
t.start()
if __name__ == '__main__':
test()
上例中,在run函數(shù)的if判斷中第一次請求資源,請求后還未 release ,再次acquire,最終無法釋放,造成死鎖。這里例子中通過將print下面的兩行注釋掉就可以正常執(zhí)行了 ,除此之外也可以通過可重入鎖解決,后面會提到。
2、互相調(diào)用死鎖
上例中的死鎖是在同一個def函數(shù)內(nèi)多次調(diào)用造成的,另一種情況是兩個函數(shù)中都會調(diào)用相同的資源,互相等待對方結(jié)束的情況。如果兩個線程分別占有一部分資源并且同時等待對方的資源,就會造成死鎖。
import threading
import time
class MyThread(threading.Thread):
def do1(self):
global resA, resB
if mutexA.acquire():
msg = self.name+' got resA'
print msg
if mutexB.acquire(1):
msg = self.name+' got resB'
print msg
mutexB.release()
mutexA.release()
def do2(self):
global resA, resB
if mutexB.acquire():
msg = self.name+' got resB'
print msg
if mutexA.acquire(1):
msg = self.name+' got resA'
print msg
mutexA.release()
mutexB.release()
def run(self):
self.do1()
self.do2()
resA = 0
resB = 0
mutexA = threading.Lock()
mutexB = threading.Lock()
def test():
for i in range(5):
t = MyThread()
t.start()
if __name__ == '__main__':
test()
這個死鎖的示例稍微有點復(fù)雜。具體可以理下。
二、可重入鎖
為了支持在同一線程中多次請求同一資源,python提供了“可重入鎖”:threading.RLock。RLock內(nèi)部維護(hù)著一個Lock和一個counter變量,counter記錄了acquire的次數(shù),從而使得資源可以被多次require。直到一個線程所有的acquire都被release,其他的線程才能獲得資源。這里以例1為例,如果使用RLock代替Lock,則不會發(fā)生死鎖:
import threading
import time
class MyThread(threading.Thread):
def run(self):
global num
time.sleep(1)
if mutex.acquire(1):
num = num+1
msg = self.name+' set num to '+str(num)
print msg
mutex.acquire()
mutex.release()
mutex.release()
num = 0
mutex = threading.RLock()
def test():
for i in range(5):
t = MyThread()
t.start()
if __name__ == '__main__':
test()
和上面那個例子的不同之處在于threading.Lock()換成了threading.RLock() 。
三、互斥鎖
python threading模塊有兩類鎖:互斥鎖(threading.Lock )和可重用鎖(threading.RLock)。兩者的用法基本相同,具體如下:
lock = threading.Lock()
lock.acquire()
dosomething……
lock.release()
RLock的用法是將threading.Lock()修改為threading.RLock()。便于理解,先來段代碼:
[root@361way lock]# cat lock1.py
#!/usr/bin/env python
# coding=utf-8
import threading # 導(dǎo)入threading模塊
import time # 導(dǎo)入time模塊
class mythread(threading.Thread): # 通過繼承創(chuàng)建類
def __init__(self,threadname): # 初始化方法
# 調(diào)用父類的初始化方法
threading.Thread.__init__(self,name = threadname)
def run(self): # 重載run方法
global x # 使用global表明x為全局變量
for i in range(3):
x = x + 1
time.sleep(5) # 調(diào)用sleep函數(shù),讓線程休眠5秒
print x
tl = [] # 定義列表
for i in range(10):
t = mythread(str(i)) # 類實例化
tl.append(t) # 將類對象添加到列表中
x=0 # 將x賦值為0
for i in tl:
i.start()
這里執(zhí)行的結(jié)果和想想的不同,結(jié)果如下:
[root@361way lock]# python lock1.py
30
30
30
30
30
30
30
30
30
30
為什么結(jié)果都是30呢?關(guān)鍵在于global 行和 time.sleep行。
1、由于x是一個全局變量,所以每次循環(huán)后 x 的值都是執(zhí)行后的結(jié)果值;
2、由于該代碼是多線程的操作,所以在sleep 等待的時候,之前已經(jīng)執(zhí)行完成的線程會在這等待,而后續(xù)的進(jìn)程在等待的5秒這段時間也執(zhí)行完成 ,等待print。同樣由于global 的原理,x被重新斌值。所以打印出的結(jié)果全是30 ;
3、便于理解,可以嘗試將sleep等注釋,你再看下結(jié)果,就會發(fā)現(xiàn)有不同。
在實際應(yīng)用中,如抓取程序等,也會出現(xiàn)類似于sleep等待的情況。在前后調(diào)用有順序或打印有輸出的時候,就會現(xiàn)并發(fā)競爭,造成結(jié)果或輸出紊亂。這里就引入了鎖的概念,上面的代碼修改下,如下:
[root@361way lock]# cat lock2.py
#!/usr/bin/env python
# coding=utf-8
import threading # 導(dǎo)入threading模塊
import time # 導(dǎo)入time模塊
class mythread(threading.Thread): # 通過繼承創(chuàng)建類
def __init__(self,threadname): # 初始化方法
threading.Thread.__init__(self,name = threadname)
def run(self): # 重載run方法
global x # 使用global表明x為全局變量
lock.acquire() # 調(diào)用lock的acquire方法
for i in range(3):
x = x + 1
time.sleep(5) # 調(diào)用sleep函數(shù),讓線程休眠5秒
print x
lock.release() # 調(diào)用lock的release方法
lock = threading.Lock() # 類實例化
tl = [] # 定義列表
for i in range(10):
t = mythread(str(i)) # 類實例化
tl.append(t) # 將類對象添加到列表中
x=0 # 將x賦值為0
for i in tl:
i.start() # 依次運行線程
執(zhí)行的結(jié)果如下:
[root@361way lock]# python lock2.py
3
6
9
12
15
18
21
24
27
30
加鎖的結(jié)果會造成阻塞,而且會造成開鎖大。會根據(jù)順序由并發(fā)的多線程按順序輸出,如果后面的線程執(zhí)行過快,需要等待前面的進(jìn)程結(jié)束后其才能結(jié)束 --- 寫的貌似有點像隊列的概念了 ,不過在加鎖的很多場景下確實可以通過隊列去解決。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價值 在數(shù)據(jù)驅(qū)動決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類分析:從操作實踐到業(yè)務(wù)價值挖掘 在數(shù)據(jù)分析場景中,聚類分析作為 “無監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價值導(dǎo)向 統(tǒng)計模型作為數(shù)據(jù)分析的核心工具,并非簡單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10