1.過程這個概念
過程,有時候被稱作輕量級進程(LightweightProcess,LWP),是程序執行流的最低控制模塊。統一標準的過程由過程ID,現階段命令表針(PC),存儲器結合和局部變量構成。此外,過程是過程里的一個實體線,被系統軟件多帶帶生產調度和分配的基本要素,過程自己并不有著服務器資源。
2.threading.thread()簡單地應用
2.1加上過程能是程序執行迅速
pythod的thread模塊還是比較最底層的控制模塊,pythod的threading模塊是對thread做了很多包裝,能夠方便快捷被應用。
有一點在運行時不可缺少的網絡資源,但是它能與同為1個進度的其他線程共享過程所具有的所有網絡資源。
import threading import time def saySorry(): print("親愛的,我錯了,我能吃飯了嗎?") time.sleep(5) if __name__=="__main__": start_time1=time.time() for i in range(5): t=threading.Thread(target=saySorry) t.start()#啟動線程,即讓線程開始執行 end_time1=time.time() print(end_time1-start_time1) start_time2=time.time() for i in range(5): t=saySorry() end_time2=time.time() print(end_time2-start_time2)
輸出為:
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
0.001995086669921875
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
親愛的,我錯了,我能吃飯了嗎?
25.001766204833984
2.2主線程會等待所有的子線程結束后才結束
import threading from time import sleep,ctime def sing(): for i in range(3): print("正在唱歌...%d"%i) sleep(1) def dance(): for i in range(3): print("正在跳舞...%d"%i) sleep(1) if __name__=='__main__': print('---開始---:%s'%ctime()) t1=threading.Thread(target=sing) t2=threading.Thread(target=dance) t1.start() t2.start() #sleep(5)#屏蔽此行代碼,試試看,程序是否會立馬結束? print('---結束---:%s'%ctime())
輸出為:
---開始---:Mon Sep 28 14:42:09 2020
正在唱歌...0
正在跳舞...0---結束---:Mon Sep 28 14:42:09 2020
正在唱歌...1
正在跳舞...1
正在唱歌...2
正在跳舞...2
如果釋放‘sleep(5)’,輸出為:
---開始---:Mon Sep 28 14:43:36 2020
正在唱歌...0
正在跳舞...0
正在跳舞...1
正在唱歌...1
正在唱歌...2正在跳舞...2
---結束---:Mon Sep 28 14:43:41 2020
3.查看線程數量
import threading from time import sleep,ctime def sing(): for i in range(3): print("正在唱歌...%d"%i) sleep(1) def dance(): for i in range(3): print("正在跳舞...%d"%i) sleep(1) if __name__=='__main__': print('---開始---:%s'%ctime()) t1=threading.Thread(target=sing) t2=threading.Thread(target=dance) t1.start() t2.start() while True: length=len(threading.enumerate()) print('當前運行的線程數為:%d'%length) if length<=1: break sleep(0.5)
輸出為:
---開始---:Mon Sep 28 14:46:16 2020
正在唱歌...0
正在跳舞...0
當前運行的線程數為:3
當前運行的線程數為:3
正在唱歌...1
正在跳舞...1當前運行的線程數為:3
當前運行的線程數為:3
正在唱歌...2
正在跳舞...2
當前運行的線程數為:3
當前運行的線程數為:3
當前運行的線程數為:1
4.線程參數及順序
4.1傳遞參數的方法
使用args傳遞參數threading.Thread(target=sing,args=(10,100,100))
使用kwargs傳遞參數threading.Thread(target=sing,kwargs={“a”:10,“b”:100,“c”:100})
同時使用args和kwargs傳遞參數threading.Thread(target=sing,args=(10,),kwargs={“b”:100,“c”:100})
4.2線程的執行順序
import threading import time def sing(): for i in range(5): print("我是sing") time.sleep(1) def dance(): for i in range(5): print("我是dance") time.sleep(1) if __name__=='__main__': #創建兩個子線程 t1=threading.Thread(target=sing) t2=threading.Thread(target=dance) #啟動子線程 t1.start() t2.start()
輸出為:
我是sing
我是dance
我是sing
我是dance
我是dance
我是sing
我是dance我是sing
我是sing
我是dance
說明:
從代碼和執行結果我們可以看出,多線程程序的執行順序是不確定的。當執行到sleep語句時,線程將被阻塞(Blocked),到sleep結束后,線程進入就緒(Runnable)狀態,等待調度。而線程調度將自行選擇一個線程執行。上面的代碼中只能保證每個線程都運行完整個run函數,但是線程的啟動順序、run函數中每次循環的執行順序都不能確定。
5.守護線程
守護線程:如果在程序中將子線程設置為守護線程,則該子線程會在主線程結束時自動退出,設置方式為thread.setDaemon(True),要在thread.start()之前設置,默認是false的,也就是主線程結束時,子線程依然在執行。
5.1如下代碼,主線程已經exit()【其實并沒有真正結束】,子線程還在繼續執行
import threading import time def test(): for i in range(7): print("test is run:",i) time.sleep(1) if __name__=='__main__': #創建子線程 t1=threading.Thread(target=test) #啟動子線程 t1.start() #休眠2秒 time.sleep(2) print("我OVER了") #退出 exit()
輸出為:
test is run:0
test is run:1
我OVER了
test is run:2
test is run:3
test is run:4
test is run:5
test is run:6
5.2設置守護線程
為線程設置守護,如果主線程結束,子線程也隨之結束。
import threading import time def test(): for i in range(7): print("test is run:",i) time.sleep(1) if __name__=='__main__': #創建子線程 t1=threading.Thread(target=test) #設置線程保護 t1.setDaemon(True) #啟動子線程 t1.start() #休眠2秒 time.sleep(2) print("我OVER了") #退出 exit() 輸出為: test is run:0 test is run:1 我OVER了 參考代碼 import threading from threading import Lock,Thread import time,os '''
python多線程詳解
什么是線程?
線程也叫輕量級進程,是操作系統能夠進行運算調度的最小單位,它被包涵在進程之中,是進程中的實際運作單位。
線程自己不擁有系統資源,只擁有一點兒在運行中必不可少的資源,但它可與同屬一個進程的其他線程共享進程所
擁有的全部資源。一個線程可以創建和撤銷另一個線程,同一個進程中的多個線程之間可以并發執行
'''
'''
為什么要使用多線程?
線程在程序中是獨立的、并發的執行流。與分隔的進程相比,進程中線程之間的隔離程度要小,它們共享內存、文件句柄
和其他進程應有的狀態。
因為線程的劃分尺度小于進程,使得多線程程序的并發性高。進程在執行過程之中擁有獨立的內存單元,而多個線程共享
內存,從而極大的提升了程序的運行效率。
線程比進程具有更高的性能,這是由于同一個進程中的線程都有共性,多個線程共享一個進程的虛擬空間。線程的共享環境
包括進程代碼段、進程的共有數據等,利用這些共享的數據,線程之間很容易實現通信。
操作系統在創建進程時,必須為改進程分配獨立的內存空間,并分配大量的相關資源,但創建線程則簡單得多。因此,使用多線程
來實現并發比使用多進程的性能高得要多。
'''
'''
總結起來,使用多線程編程具有如下幾個優點:
進程之間不能共享內存,但線程之間共享內存非常容易。
操作系統在創建進程時,需要為該進程重新分配系統資源,但創建線程的代價則小得多。因此使用多線程來實現多任務并發執行比使用多進程的效率高
python語言內置了多線程功能支持,而不是單純地作為底層操作系統的調度方式,從而簡化了python的多線程編程。
''' ''' 普通創建方式 ''' #def run(n): #print('task',n) #time.sleep(1) #print('2s') #time.sleep(1) #print('1s') #time.sleep(1) #print('0s') #time.sleep(1) # #if __name__=='__main__': #t1=threading.Thread(target=run,args=('t1',))#target是要執行的函數名(不是函數),args是函數對應的參數,以元組的形式存在 #t2=threading.Thread(target=run,args=('t2',)) #t1.start() #t2.start() ''' 自定義線程:繼承threading.Thread來定義線程類,其本質是重構Thread類中的run方法 ''' #class MyThread(threading.Thread): #def __init__(self,n): #super(MyThread,self).__init__()#重構run函數必須寫 #self.n=n # #def run(self): #print('task',self.n) #time.sleep(1) #print('2s') #time.sleep(1) #print('1s') #time.sleep(1) #print('0s') #time.sleep(1) # #if __name__=='__main__': #t1=MyThread('t1') #t2=MyThread('t2') #t1.start() #t2.start() '''
守護線程
下面這個例子,這里使用setDaemon(True)把所有的子線程都變成了主線程的守護線程,
因此當主線程結束后,子線程也會隨之結束,所以當主線程結束后,整個程序就退出了。
所謂'線程守護',就是主線程不管該線程的執行情況,只要是其他子線程結束且主線程執行完畢,主線程都會關閉。也就是說:主線程不等待該守護線程的執行完再去關閉。
''' #def run(n): #print('task',n) #time.sleep(1) #print('3s') #time.sleep(1) #print('2s') #time.sleep(1) #print('1s') # #if __name__=='__main__': #t=threading.Thread(target=run,args=('t1',)) #t.setDaemon(True) #t.start() #print('end') ''' 通過執行結果可以看出,設置守護線程之后,當主線程結束時,子線程也將立即結束,不再執行 ''' ''' 主線程等待子線程結束 為了讓守護線程執行結束之后,主線程再結束,我們可以使用join方法,讓主線程等待子線程執行 ''' #def run(n): #print('task',n) #time.sleep(2) #print('5s') #time.sleep(2) #print('3s') #time.sleep(2) #print('1s') #if __name__=='__main__': #t=threading.Thread(target=run,args=('t1',)) #t.setDaemon(True)#把子線程設置為守護線程,必須在start()之前設置 #t.start() #t.join()#設置主線程等待子線程結束 #print('end') ''' 多線程共享全局變量 線程時進程的執行單元,進程時系統分配資源的最小執行單位,所以在同一個進程中的多線程是共享資源的 ''' #g_num=100 #def work1(): #global g_num #for i in range(3): #g_num+=1 #print('in work1 g_num is:%d'%g_num) # #def work2(): #global g_num #print('in work2 g_num is:%d'%g_num) # #if __name__=='__main__': #t1=threading.Thread(target=work1) #t1.start() #time.sleep(1) #t2=threading.Thread(target=work2) #t2.start() ''' 由于線程之間是進行隨機調度,并且每個線程可能只執行n條執行之后,當多個線程同時修改同一條數據時可能會出現臟數據, 所以出現了線程鎖,即同一時刻允許一個線程執行操作。線程鎖用于鎖定資源,可以定義多個鎖,像下面的代碼,當需要獨占 某一個資源時,任何一個鎖都可以鎖定這個資源,就好比你用不同的鎖都可以把這個相同的門鎖住一樣。 由于線程之間是進行隨機調度的,如果有多個線程同時操作一個對象,如果沒有很好地保護該對象,會造成程序結果的不可預期, 我們因此也稱為“線程不安全”。 為了防止上面情況的發生,就出現了互斥鎖(Lock) ''' #def work(): #global n #lock.acquire() #temp=n #time.sleep(0.1) #n=temp-1 #lock.release() # # #if __name__=='__main__': #lock=Lock() #n=100 #l=[] #for i in range(100): #p=Thread(target=work) #l.append(p) #p.start() #for p in l: #p.join() ''' 遞歸鎖:RLcok類的用法和Lock類一模一樣,但它支持嵌套,在多個鎖沒有釋放的時候一般會使用RLock類 ''' #def func(lock): #global gl_num #lock.acquire() #gl_num+=1 #time.sleep(1) #print(gl_num) #lock.release() # # #if __name__=='__main__': #gl_num=0 #lock=threading.RLock() #for i in range(10): #t=threading.Thread(target=func,args=(lock,)) #t.start() ''' 信號量(BoundedSemaphore類) 互斥鎖同時只允許一個線程更改數據,而Semaphore是同時允許一定數量的線程更改數據,比如廁所有3個坑, 那最多只允許3個人上廁所,后面的人只能等里面有人出來了才能再進去 ''' #def run(n,semaphore): #semaphore.acquire()#加鎖 #time.sleep(3) #print('run the thread:%sn'%n) #semaphore.release()#釋放 # # #if __name__=='__main__': #num=0 #semaphore=threading.BoundedSemaphore(5)#最多允許5個線程同時運行 #for i in range(22): #t=threading.Thread(target=run,args=('t-%s'%i,semaphore)) #t.start() #while threading.active_count()!=1: #pass #else: #print('----------all threads done-----------') ''' python線程的事件用于主線程控制其他線程的執行,事件是一個簡單的線程同步對象,其主要提供以下的幾個方法: clear將flag設置為False set將flag設置為True is_set判斷是否設置了flag wait會一直監聽flag,如果沒有檢測到flag就一直處于阻塞狀態 事件處理的機制:全局定義了一個Flag,當Flag的值為False,那么event.wait()就會阻塞,當flag值為True, 那么event.wait()便不再阻塞 ''' event=threading.Event() def lighter(): count=0 event.set()#初始者為綠燈 while True: if 5<count<=10: event.clear()#紅燈,清除標志位 print("33[41;lmred light is on...33[0m]") elif count>10: event.set()#綠燈,設置標志位 count=0 else: print('33[42;lmgreen light is on...33[0m') time.sleep(1) count+=1 def car(name): while True: if event.is_set():#判斷是否設置了標志位 print('[%s]running.....'%name) time.sleep(1) else: print('[%s]sees red light,waiting...'%name) event.wait() print('[%s]green light is on,start going...'%name) #startTime=time.time() light=threading.Thread(target=lighter,) light.start() car=threading.Thread(target=car,args=('MINT',)) car.start() endTime=time.time() #print('用時:',endTime-startTime) '''
GIL全局解釋器
在非python環境中,單核情況下,同時只能有一個任務執行。多核時可以支持多個線程同時執行。但是在python中,無論有多少個核
同時只能執行一個線程。究其原因,這就是由于GIL的存在導致的。
GIL的全程是全局解釋器,來源是python設計之初的考慮,為了數據安全所做的決定。某個線程想要執行,必須先拿到GIL,我們可以
把GIL看做是“通行證”,并且在一個python進程之中,GIL只有一個。拿不到線程的通行證,并且在一個python進程中,GIL只有一個,
拿不到通行證的線程,就不允許進入CPU執行。GIL只在cpython中才有,因為cpython調用的是c語言的原生線程,所以他不能直接操
作cpu,而只能利用GIL保證同一時間只能有一個線程拿到數據。而在pypy和jpython中是沒有GIL的
python在使用多線程的時候,調用的是c語言的原生過程。
'''
'''
python針對不同類型的代碼執行效率也是不同的
1、CPU密集型代碼(各種循環處理、計算等),在這種情況下,由于計算工作多,ticks技術很快就會達到閥值,然后出發GIL的
釋放與再競爭(多個線程來回切換當然是需要消耗資源的),所以python下的多線程對CPU密集型代碼并不友好。
2、IO密集型代碼(文件處理、網絡爬蟲等設計文件讀寫操作),多線程能夠有效提升效率(單線程下有IO操作會進行IO等待,
造成不必要的時間浪費,而開啟多線程能在線程A等待時,自動切換到線程B,可以不浪費CPU的資源,從而能提升程序的執行
效率)。所以python的多線程對IO密集型代碼比較友好。
'''
'''
主要要看任務的類型,我們把任務分為I/O密集型和計算密集型,而多線程在切換中又分為I/O切換和時間切換。如果任務屬于是I/O密集型,
若不采用多線程,我們在進行I/O操作時,勢必要等待前面一個I/O任務完成后面的I/O任務才能進行,在這個等待的過程中,CPU處于等待
狀態,這時如果采用多線程的話,剛好可以切換到進行另一個I/O任務。這樣就剛好可以充分利用CPU避免CPU處于閑置狀態,提高效率。但是
如果多線程任務都是計算型,CPU會一直在進行工作,直到一定的時間后采取多線程時間切換的方式進行切換線程,此時CPU一直處于工作狀態,
此種情況下并不能提高性能,相反在切換多線程任務時,可能還會造成時間和資源的浪費,導致效能下降。這就是造成上面兩種多線程結果不能的解釋。
結論:I/O密集型任務,建議采取多線程,還可以采用多進程+協程的方式(例如:爬蟲多采用多線程處理爬取的數據);對于計算密集型任務,python此時就不適用了。
'''
綜上所述,這篇文章就給大家介紹到這里了,希望可以給大家帶來幫助。
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://m.specialneedsforspecialkids.com/yun/128697.html
本文給大家介紹一類從視頻里獲取視頻幀的辦法,因為單核獲取視頻幀速率比較慢,因而接下來我們增強了線程同步的辦法,感興趣的朋友能夠出手試一試 Python迅速獲取視頻幀(線程同步) 現在詳細介紹一下一類從視頻里獲取視頻幀的辦法,因為單核獲取視頻幀速率比較慢,因而接下來我們增強了線程同步的辦法。 1、獲取視頻幀 獲取視頻幀關鍵用了Opencv控制模塊。 在其中: camera=cv2.V...
摘要:中關于線程的標準庫是,之前在版本中的在之后更名為,無論是還是都應該盡量避免使用較為底層的而應該使用。而與線程相比,協程尤其是結合事件循環無論在編程模型還是語法上,看起來都是非常友好的單線程同步過程。 項目地址:https://git.io/pytips 要說到線程(Thread)與協程(Coroutine)似乎總是需要從并行(Parallelism)與并發(Concurrency)談起...
摘要:進程可創建多個線程來執行同一程序的不同部分。就緒等待線程調度。運行線程正常運行阻塞暫停運行,解除阻塞后進入狀態重新等待調度。消亡線程方法執行完畢返回或者異常終止。多線程多的情況下,依次執行各線程的方法,前頭一個結束了才能執行后面一個。 淺談Python多線程 作者簡介: 姓名:黃志成(小黃)博客: 博客 線程 一.什么是線程? 操作系統原理相關的書,基本都會提到一句很經典的話: 進程...
摘要:多線程的理解多進程和多線程都可以執行多個任務,線程是進程的一部分。多線程創建在中,同樣可以實現多線程,有兩個標準模塊和,不過我們主要使用更高級的模塊。多線程的應用場景。 1、多線程的理解 多進程和多線程都可以執行多個任務,線程是進程的一部分。線程的特點是線程之間可以共享內存和變量,資源消耗少(不過在Unix環境中,多進程和多線程資源調度消耗差距不明顯,Unix調度較快),缺點是線程之間...
摘要:多線程和鎖作者博客進程和線程進程是執行中的計算機程序。線程包括開始執行順序和結束三部分。的多進程相關模塊模塊是高級別的多線程模塊。線程鎖當多線程爭奪鎖時,允許第一個獲得鎖的線程進入臨街區,并執行代碼。 Python 多線程和鎖 作者博客:http://zzir.cn/ 進程和線程 進程是執行中的計算機程序。每個進程都擁有自己的地址空間、內存、數據棧及其它的輔助數據。操作系統管理著所有的...
閱讀 926·2023-01-14 11:38
閱讀 899·2023-01-14 11:04
閱讀 758·2023-01-14 10:48
閱讀 2063·2023-01-14 10:34
閱讀 965·2023-01-14 10:24
閱讀 844·2023-01-14 10:18
閱讀 512·2023-01-14 10:09
閱讀 590·2023-01-14 10:02