Python實(shí)現(xiàn)線程間同步的方法

這篇文章給大家分享的是有關(guān)Python實(shí)現(xiàn)線程間同步的方法的內(nèi)容。小編覺(jué)得挺實(shí)用的，因此分享給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧。

線程間同步

如果多個(gè)線程共同對(duì)某個(gè)數(shù)據(jù)修改，則可能出現(xiàn)不可預(yù)料的結(jié)果，為了保證數(shù)據(jù)的正確性，需要對(duì)多個(gè)線程進(jìn)行同步。

使用Thread對(duì)象的Lock和Rlock可以實(shí)現(xiàn)簡(jiǎn)單的線程同步，這兩個(gè)對(duì)象都有acquire方法和release方法，對(duì)于那些需要每次只允許一個(gè)線程操作的數(shù)據(jù)，可以將其操作放到acquire和release方法之間。

需要注意的是，Python有一個(gè)GIL（Global Interpreter Lock）機(jī)制，任何線程在運(yùn)行之前必須獲取這個(gè)全局鎖才能執(zhí)行，每當(dāng)執(zhí)行完100條字節(jié)碼，全局鎖才會(huì)釋放，切換到其他線程執(zhí)行。

線程同步問(wèn)題

多線程實(shí)現(xiàn)同步有四種方式：

鎖機(jī)制，信號(hào)量，條件判斷和同步隊(duì)列。

下面我主要關(guān)注兩種同步機(jī)制：鎖機(jī)制和同步隊(duì)列。

（1）鎖機(jī)制

threading的Lock類，用該類的acquire函數(shù)進(jìn)行加鎖，用realease函數(shù)進(jìn)行解鎖

    import threading
    import time
    class myThread(threading.Thread):
       def __init__(self, threadID, name, counter):
          threading.Thread.__init__(self)
          self.threadID = threadID
          self.name = name
          self.counter = counter
       def run(self):
          print("Starting " + self.name)
          # 獲得鎖，成功獲得鎖定后返回True
          # 可選的timeout參數(shù)不填時(shí)將一直阻塞直到獲得鎖定
          # 否則超時(shí)后將返回False
          threadLock.acquire()
          print_time(self.name, self.counter, 5)
          # 釋放鎖
          threadLock.release()
    def print_time(threadName, delay, counter):
       while counter:
          time.sleep(delay)
          print("%s: %s" % (threadName, time.ctime(time.time())))
          counter -= 1
        
    threadLock = threading.Lock()
    threads = []
    # 創(chuàng)建新線程
    thread1 = myThread(1, "Thread-1", 1)
    thread2 = myThread(2, "Thread-2", 2)
    # 開啟新線程
    thread1.start()
    thread2.start()
    # 添加線程到線程列表
    threads.append(thread1)
    threads.append(thread2)
    # 等待所有線程完成
    for t in threads:
       t.join()
    
    print("Exiting Main Thread")

(2) 線程同步隊(duì)列queue

python2.x中提供的Queue， Python3.x中提供的是queue

見import queue.

Python的queue模塊中提供了同步的、線程安全的隊(duì)列類，包括FIFO（先入先出)隊(duì)列Queue，LIFO（后入先出）隊(duì)列LifoQueue，和優(yōu)先級(jí)隊(duì)列PriorityQueue。這些隊(duì)列都實(shí)現(xiàn)了鎖原語(yǔ)，能夠在多線程中直接使用?？梢允褂藐?duì)列來(lái)實(shí)現(xiàn)線程間的同步。

queue模塊中的常用方法:

queue.qsize() 返回隊(duì)列的大小

queue.empty() 如果隊(duì)列為空，返回True,反之False

queue.full() 如果隊(duì)列滿了，返回True,反之False

queue.full 與 maxsize 大小對(duì)應(yīng)

queue.get([block[, timeout]])獲取隊(duì)列，timeout等待時(shí)間

queue.get_nowait() 相當(dāng)Queue.get(False)

queue.put(item) 寫入隊(duì)列，timeout等待時(shí)間

queue.put_nowait(item) 相當(dāng)Queue.put(item, False)

queue.task_done() 在完成一項(xiàng)工作之后，Queue.task_done()函數(shù)向任務(wù)已經(jīng)完成的隊(duì)列發(fā)送一個(gè)信號(hào)

queue.join() 實(shí)際上意味著等到隊(duì)列為空，再執(zhí)行別的操作

案例1：

  import queue
    import threading
    import time
    
    exitFlag = 0
    
    class myThread(threading.Thread):
       def __init__(self, threadID, name, q):
          threading.Thread.__init__(self)
          self.threadID = threadID
          self.name = name
          self.q = q
    
       def run(self):
          print("Starting " + self.name)
          process_data(self.name, self.q)
          print("Exiting " + self.name)
    
    def process_data(threadName, q):
       while not exitFlag:
          queueLock.acquire()
          if not workQueue.empty():
             data = q.get()
             queueLock.release()
             print("%s processing %s" % (threadName, data))
          else:
             queueLock.release()
          time.sleep(1)
    
    threadList = ["Thread-1", "Thread-2", "Thread-3"]
    nameList = ["One", "Two", "Three", "Four", "Five"]
    queueLock = threading.Lock()
    workQueue = queue.Queue(10)
    threads = []
    threadID = 1
    
    # 創(chuàng)建新線程
    for tName in threadList:
       thread = myThread(threadID, tName, workQueue)
       thread.start()
       threads.append(thread)
       threadID += 1
    
    # 填充隊(duì)列
    queueLock.acquire()
    for word in nameList:
       workQueue.put(word)
    queueLock.release()
    
    # 等待隊(duì)列清空
    while not workQueue.empty():
       pass
    
    # 通知線程是時(shí)候退出
    exitFlag = 1
    
    # 等待所有線程完成
    for t in threads:
       t.join()
    print("Exiting Main Thread")

案例2：

    import time
    import threading
    import queue
    
    class Worker(threading.Thread):
        def __init__(self, name, queue):
            threading.Thread.__init__(self)
            self.queue = queue
            self.start()    #執(zhí)行run()
    
        def run(self):
            #循環(huán)，保證接著跑下一個(gè)任務(wù)
            while True:
                # 隊(duì)列為空則退出線程
                if self.queue.empty():
                    break
                # 獲取一個(gè)隊(duì)列數(shù)據(jù)
                foo = self.queue.get()
                # 延時(shí)1S模擬你要做的事情
                time.sleep(1)
                # 打印
                print(self.getName() + " process " + str(foo))
                # 任務(wù)完成
                self.queue.task_done()
    
    
    # 隊(duì)列
    queue = queue.Queue()
    # 加入100個(gè)任務(wù)隊(duì)列
    for i in range(100):
        queue.put(i)
    # 開10個(gè)線程
    for i in range(10):
        threadName = 'Thread' + str(i)
        Worker(threadName, queue)
    # 所有線程執(zhí)行完畢后關(guān)閉
    queue.join()

感謝各位的閱讀！關(guān)于Python實(shí)現(xiàn)線程間同步的方法就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，讓大家可以學(xué)到更多知識(shí)。如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到吧！