Python多線程

Python 多線程

? ??

多線程類似于同時(shí)執(zhí)行多個(gè)不同程序,多線程運(yùn)行有如下優(yōu)點(diǎn):

使用線程可以把占據(jù)長時(shí)間的程序中的任務(wù)放到后臺(tái)去處理。

用戶界面可以更加吸引人,這樣比如用戶點(diǎn)擊了一個(gè)按鈕去觸發(fā)某些事件的處理,可以彈出一個(gè)進(jìn)度條來顯示處理的進(jìn)度

程序的運(yùn)行速度可能加快

在一些等待的任務(wù)實(shí)現(xiàn)上如用戶輸入、文件讀寫和網(wǎng)絡(luò)收發(fā)數(shù)據(jù)等,線程就比較有用了。在這種情況下我們可以釋放一些珍貴的資源如內(nèi)存占用等等。

線程在執(zhí)行過程中與進(jìn)程還是有區(qū)別的。每個(gè)獨(dú)立的線程有一個(gè)程序運(yùn)行的入口、順序執(zhí)行序列和程序的出口。但是線程不能夠獨(dú)立執(zhí)行,必須依存在應(yīng)用程序中,由應(yīng)用程序提供多個(gè)線程執(zhí)行控制。

每個(gè)線程都有他自己的一組CPU寄存器,稱為線程的上下文,該上下文反映了線程上次運(yùn)行該線程的CPU寄存器的狀態(tài)。

指令指針和堆棧指針寄存器是線程上下文中兩個(gè)最重要的寄存器,線程總是在進(jìn)程得到上下文中運(yùn)行的,這些地址都用于標(biāo)志擁有線程的進(jìn)程地址空間中的內(nèi)存。

線程可以被搶占(中斷)。

在其他線程正在運(yùn)行時(shí),線程可以暫時(shí)擱置(也稱為睡眠) -- 這就是線程的退讓。

Python線程

Python中使用線程有兩種方式:函數(shù)或者用類來包裝線程對(duì)象。

函數(shù)式:調(diào)用thread模塊中的start_new_thread()函數(shù)來產(chǎn)生新線程。語法如下:

thread.start_new_thread ( function, args[, kwargs] )

參數(shù)說明:

function - 線程函數(shù)。

args - 傳遞給線程函數(shù)的參數(shù),他必須是個(gè)tuple類型。

kwargs - 可選參數(shù)。

#!/usr/bin/python#?-*-?coding:?UTF-8?-*-

importthread

importtime

#?為線程定義一個(gè)函數(shù)

defprint_time(threadName,delay):

?????count=0

?????whilecount<5:

? ?? ?????time.sleep(delay)

? ?? ?????count+=1

? ?? ?????print"%s:?%s"%(threadName,time.ctime(time.time()))

#?創(chuàng)建兩個(gè)線程

?????try:

? ?? ?????thread.start_new_thread(print_time,("Thread-1",2,))

? ?? ?????thread.start_new_thread(print_time,("Thread-2",4,))

?????except:

? ?? ?????print"Error:?unable?to?start?thread"

?????while1:

? ?? ?????pass

執(zhí)行以上程序輸出結(jié)果如下:

Thread-1:?Thu?Jan?22?15:42:17?2009

Thread-1:?Thu?Jan?22?15:42:19?2009

Thread-2:?Thu?Jan?22?15:42:19?2009

Thread-1:?Thu?Jan?22?15:42:21?2009

Thread-2:?Thu?Jan?22?15:42:23?2009

Thread-1:?Thu?Jan?22?15:42:23?2009

Thread-1:?Thu?Jan?22?15:42:25?2009

Thread-2:?Thu?Jan?22?15:42:27?2009

Thread-2:?Thu?Jan?22?15:42:31?2009

Thread-2:?Thu?Jan?22?15:42:35?2009

線程的結(jié)束一般依靠線程函數(shù)的自然結(jié)束;也可以在線程函數(shù)中調(diào)用thread.exit(),他拋出SystemExit exception,達(dá)到退出線程的目的。

線程模塊

Python通過兩個(gè)標(biāo)準(zhǔn)庫thread和threading提供對(duì)線程的支持。thread提供了低級(jí)別的、原始的線程以及一個(gè)簡單的鎖。

thread 模塊提供的其他方法:

threading.currentThread(): 返回當(dāng)前的線程變量。

threading.enumerate(): 返回一個(gè)包含正在運(yùn)行的線程的list。正在運(yùn)行指線程啟動(dòng)后、結(jié)束前,不包括啟動(dòng)前和終止后的線程。

threading.activeCount(): 返回正在運(yùn)行的線程數(shù)量,與len(threading.enumerate())有相同的結(jié)果。

除了使用方法外,線程模塊同樣提供了Thread類來處理線程,Thread類提供了以下方法:

run():用以表示線程活動(dòng)的方法。

start():啟動(dòng)線程活動(dòng)。

join([time]):等待至線程中止。這阻塞調(diào)用線程直至線程的join() 方法被調(diào)用中止-正常退出或者拋出未處理的異常-或者是可選的超時(shí)發(fā)生。

isAlive():返回線程是否活動(dòng)的。

getName():返回線程名。

setName():設(shè)置線程名。

使用Threading模塊創(chuàng)建線程

使用Threading模塊創(chuàng)建線程,直接從threading.Thread繼承,然后重寫__init__方法和run方法:

實(shí)例(Python 2.0+)

#!/usr/bin/python#?-*-?coding:?UTF-8?-*-

importthreading

importtime

exitFlag=0

classmyThread(threading.Thread):#繼承父類threading.Thread

?????def__init__(self,threadID,name,counter):

? ?? ?????threading.Thread.__init__(self)

? ?? ?????self.threadID=threadID

? ?? ?????self.name=name

? ?? ?????self.counter=counter

?????defrun(self):#把要執(zhí)行的代碼寫到run函數(shù)里面?線程在創(chuàng)建后會(huì)直接運(yùn)行run函數(shù)

? ?? ?????print"Starting"+self.name

? ? ? ? ? print print_time(self.name,self.counter,5)

? ?? ?????print"Exiting"+self.name

? ?? defprint_time(self,threadName,delay,counter):

? ?? ?????whilecounter:

? ? ? ? ? ?????ifexitFlag:

? ? ? ? ? ? ?? ?????threading.Thread.exit()

? ? ? ? ? ? ?? time.sleep(delay)

? ? ? ? ? ?????print"%s:?%s"%(threadName,time.ctime(time.time()))

? ? ? ? ? ?????counter-=1

#?創(chuàng)建新線程

thread1=myThread(1,"Thread-1",1)

thread2=myThread(2,"Thread-2",2)

#?開啟線程

thread1.start()

thread2.start()

print"Exiting?Main?Thread"

以上程序執(zhí)行結(jié)果如下;

Starting?Thread-1

Starting?Thread-2

Exiting?Main?Thread

Thread-1:?Thu?Mar?21?09:10:03?2013

Thread-1:?Thu?Mar?21?09:10:04?2013

Thread-2:?Thu?Mar?21?09:10:04?2013

Thread-1:?Thu?Mar?21?09:10:05?2013

Thread-1:?Thu?Mar?21?09:10:06?2013

Thread-2:?Thu?Mar?21?09:10:06?2013

Thread-1:?Thu?Mar?21?09:10:07?2013

Exiting?Thread-1

Thread-2:?Thu?Mar?21?09:10:08?2013

Thread-2:?Thu?Mar?21?09:10:10?2013

Thread-2:?Thu?Mar?21?09:10:12?2013

Exiting?Thread-2

線程同步

如果多個(gè)線程共同對(duì)某個(gè)數(shù)據(jù)修改,則可能出現(xiàn)不可預(yù)料的結(jié)果,為了保證數(shù)據(jù)的正確性,需要對(duì)多個(gè)線程進(jìn)行同步。

使用Thread對(duì)象的Lock和Rlock可以實(shí)現(xiàn)簡單的線程同步,這兩個(gè)對(duì)象都有acquire方法和release方法,對(duì)于那些需要每次只允許一個(gè)線程操作的數(shù)據(jù),可以將其操作放到acquire和release方法之間。如下:

多線程的優(yōu)勢在于可以同時(shí)運(yùn)行多個(gè)任務(wù)(至少感覺起來是這樣)。但是當(dāng)線程需要共享數(shù)據(jù)時(shí),可能存在數(shù)據(jù)不同步的問題。

考慮這樣一種情況:一個(gè)列表里所有元素都是0,線程"set"從后向前把所有元素改成1,而線程"print"負(fù)責(zé)從前往后讀取列表并打印。

那么,可能線程"set"開始改的時(shí)候,線程"print"便來打印列表了,輸出就成了一半0一半1,這就是數(shù)據(jù)的不同步。為了避免這種情況,引入了鎖的概念。

鎖有兩種狀態(tài)——鎖定和未鎖定。每當(dāng)一個(gè)線程比如"set"要訪問共享數(shù)據(jù)時(shí),必須先獲得鎖定;如果已經(jīng)有別的線程比如"print"獲得鎖定了,那么就讓線程"set"暫停,也就是同步阻塞;等到線程"print"訪問完畢,釋放鎖以后,再讓線程"set"繼續(xù)。

經(jīng)過這樣的處理,打印列表時(shí)要么全部輸出0,要么全部輸出1,不會(huì)再出現(xiàn)一半0一半1的尷尬場面。

threadLock=threading.Lock()

# 占用鎖

? ? ?threadLock.acquire()

? ? ? ? ? ?...

#?釋放鎖

? ? ? threadLock.release()

線程優(yōu)先級(jí)隊(duì)列( Queue)

Python的Queue模塊中提供了同步的、線程安全的隊(duì)列類,包括FIFO(先入先出)隊(duì)列Queue,LIFO(后入先出)隊(duì)列LifoQueue,和優(yōu)先級(jí)隊(duì)列PriorityQueue。

這些隊(duì)列都實(shí)現(xiàn)了鎖原語,能夠在多線程中直接使用。可以使用隊(duì)列來實(shí)現(xiàn)線程間的同步。

Queue模塊中的常用方法:

Queue.qsize() 返回隊(duì)列的大小

Queue.empty() 如果隊(duì)列為空,返回True,反之False

Queue.full() 如果隊(duì)列滿了,返回True,反之False

Queue.full 與 maxsize 大小對(duì)應(yīng)

Queue.get([block[, timeout]])獲取隊(duì)列,timeout等待時(shí)間

Queue.get_nowait() 相當(dāng)Queue.get(False)

Queue.put(item) 寫入隊(duì)列,timeout等待時(shí)間

Queue.put_nowait(item) 相當(dāng)Queue.put(item, False)

Queue.task_done() 在完成一項(xiàng)工作之后,Queue.task_done()函數(shù)向任務(wù)已經(jīng)完成的隊(duì)列發(fā)送一個(gè)信號(hào)

Queue.join() 實(shí)際上意味著等到隊(duì)列為空,再執(zhí)行別的操作

threading 多線程

? 1 #coding=utf-8

? 2 import threading

? 3 from time import ctime, sleep

? 4

? 5 def music(name):

? 6? ? ?for i in range(2):

? 7? ? ? ? ?print "I listening to music.%s %s" %(name, ctime())

? 8? ? ? ? ?sleep(1)

? 9

?10

?11 def move(name):

?12? ? ?for i in range(4):

?13? ? ? ? ?print "I watching moive %s %s" %(name, ctime())

?14? ? ? ? ?sleep(5)

?15

?16 t1 = threading.Thread(target=music, args=(u'傷不起',))

?17 t2 = threading.Thread(target=move, args=(u'阿凡達(dá)',)) ? ?#加逗號(hào), 防止傳參數(shù)目不對(duì)

?18

?19 threads = [t1, t2]

?20 if __name__ == '__main__':

?21? ? ?for t in threads:

?22? ? ? ? ?t.setDaemon(True) ? ? ? ? ? ? # 設(shè)置守護(hù)進(jìn)程

?23? ? ? ? ?t.start()

?24? ? ?t.join() ? ? ? ? ? ? ? ? ? ? ? ? ?# 等待所有的子線程完成

?25? ? ?print "all ove %s" % ctime()

線程對(duì)象有兩個(gè)用來管理線程機(jī)制的方法: setDaemon 和 join

setDaemon(True)

setDaemon() :設(shè)置此線程是否被主線程守護(hù)回收。默認(rèn)False不回收,需要在 start 方法前調(diào)用;設(shè)為True相當(dāng)于像主線程中注冊守護(hù),主線程結(jié)束時(shí)會(huì)將其一并回收, 回收的意思就是結(jié)束, 設(shè)置為true的話, 不管子線程是否完成都隨著主線程結(jié)束而結(jié)束,默認(rèn)為False,子線程會(huì)無限被掛起, 變成孤兒進(jìn)程, 導(dǎo)致退不出程序

join

join():設(shè)置主線程是否同步阻塞自己來待此線程執(zhí)行完畢。如果不設(shè)置的話則主進(jìn)程會(huì)繼續(xù)執(zhí)行自己的,在結(jié)束時(shí)根據(jù) setDaemon 有無注冊為守護(hù)模式的子進(jìn)程,有的話將其回收,沒有的話就結(jié)束自己,某些子線程可以仍在執(zhí)行


主線程啟動(dòng)若干個(gè)子線程后,可以繼續(xù)執(zhí)行主線程的代碼,也可以等待所有的子線程執(zhí)行完畢后繼續(xù)執(zhí)行主線程,這里需要用到的就是 join 方法,子線程通過調(diào)用 join 可以告訴主線程,你必須等著我,我完事了你才可以再往下執(zhí)行。

?????這里要理解,比如 子線程1 花費(fèi) 10秒,子線程2 花費(fèi) 5秒,如果子線程 2 調(diào)用了 join,那么 主線程只會(huì)等待用時(shí) 5秒 的子線程2 執(zhí)行完畢,會(huì)繼續(xù)向下執(zhí)行,而不會(huì)等待還需要5秒才能執(zhí)行完畢的子線程1

? ? ?所以如果需要所有的子線程都能在主線程結(jié)束前被執(zhí)行完畢,則必須為每一個(gè)子線程都注冊 join

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

推薦閱讀更多精彩內(nèi)容