溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Linux內(nèi)核中的內(nèi)存屏障知識點有哪些

發(fā)布時間:2021-12-24 14:13:08 來源:億速云 閱讀:148 作者:iii 欄目:系統(tǒng)運維

本篇內(nèi)容主要講解“Linux內(nèi)核中的內(nèi)存屏障知識點有哪些”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學(xué)習“Linux內(nèi)核中的內(nèi)存屏障知識點有哪些”吧!

緩存一致性

之前一直認為linux中很多東西是用來保證緩存一致性的,其實不是。緩存一致性絕大部分是靠硬件機制實現(xiàn)的,只有在帶lock前綴的指令執(zhí)行時才與cache有一點關(guān)系。(這話說得絕對,但我目前看來就是這樣)我們更多的時候是為了保證順序一致性。

-

所謂緩存一致性,就是在多處理器系統(tǒng)中,每個cpu都有自己的L1 cache。很可能兩個不同cpu的L1  cache中緩存的是同一片內(nèi)存的內(nèi)容,如果一個cpu更改了自己被緩存的內(nèi)容,它要保證另一個cpu讀這塊數(shù)據(jù)時也要讀到這個***的。不過你不要擔心,這個復(fù)雜的工作完全是由硬件來完成的,通過實現(xiàn)一種MESI協(xié)議,硬件可以輕松的完成緩存一致性的工作。不要說一個讀一個寫,就是多個同時寫都沒問題。一個cpu讀時總能讀入***的數(shù)據(jù),不管它是在自己的cache中,還是在其它cpu的cache中,還是在內(nèi)存中,這就是緩存一致性。

順序一致性

所謂順序一致性,說的則是與緩存一致性完全不同的概念,雖然它們都是處理器發(fā)展的產(chǎn)物。因為編譯器的技術(shù)不斷發(fā)展,它可能為了優(yōu)化你的代碼,而將某些操作的順序更改執(zhí)行。處理器中也早就有了多發(fā)射、亂序執(zhí)行的概念。這樣的結(jié)果,就是實際執(zhí)行的指令順序會與編程時代碼的執(zhí)行順序略有不同。這在單處理器下當然沒什么,畢竟只要自己的代碼不過問,就沒人過問,編譯器和處理器就是在保證自己的代碼發(fā)現(xiàn)不了的情況下打亂執(zhí)行順序的。但多處理器不是這樣,可能一個處理器上指令的完成順序,會對其它處理器上執(zhí)行的代碼造成很大影響。所以就有了順序一致性的概念,即保證一個處理器上線程的執(zhí)行順序,在其它的處理器上的線程看來,都是一樣的。這個問題的解決不是光靠處理器或者編譯器就能解決的,需要軟件的干預(yù)。

內(nèi)存屏障

軟件干預(yù)的方式也非常簡單,那就是插入內(nèi)存屏障(memory  barrier)。其實內(nèi)存屏障這個詞,是由搞處理器的人造的,弄得我們很不好理解。內(nèi)存屏障,很容易讓我們串到緩存一致性去,乃至懷疑是否這樣做才能讓其它cpu看到被修改過的cache,這樣想就錯了。所謂內(nèi)存屏障,從處理器角度來說,是用來串行化讀寫操作的,從軟件角度來講,就是用來解決順序一致性問題的。編譯器不是要打亂代碼執(zhí)行順序嗎,處理器不是要亂序執(zhí)行嗎,你插入一個內(nèi)存屏障,就相當于告訴編譯器,屏障前后的指令順序不能顛倒,告訴處理器,只有等屏障前的指令執(zhí)行完了,屏障后的指令才能開始執(zhí)行。當然,內(nèi)存屏障能阻擋編譯器亂來,但處理器還是有辦法。處理器中不是有多發(fā)射、亂序執(zhí)行、順序完成的概念嗎,它在內(nèi)存屏障時只要保證前面指令的讀寫操作,一定在后面指令的讀寫操作完成之前完成,就可以了。所以內(nèi)存屏障才會對應(yīng)有讀屏障、寫屏障和讀寫屏障三類。如x86之前保證寫操作都是順序完成的,所以不需要寫屏障,但現(xiàn)在也有部分ia32處理器的寫操作變成亂序完成,所以也需要寫屏障。

其實,除了專門的讀寫屏障指令,還有很多指令的執(zhí)行是帶有讀寫屏障功能的,比如帶lock前綴的指令。在專門的讀寫屏障指令出現(xiàn)之前,linux就是靠lock熬過來的。

至于在那里插入讀寫屏障,要視軟件的需求而定。讀寫屏障無法完全實現(xiàn)順序一致性,但多處理器上的線程也不會一直盯著你的執(zhí)行順序看,只要保證在它看過來的時候,認為你符合順序一致性,執(zhí)行不會出現(xiàn)你代碼中沒有預(yù)料到的情況。所謂預(yù)料外的情況,舉例而言,你的線程是先給變量a賦值,再給變量b賦值,結(jié)果別的處理器上運行的線程看過來,發(fā)現(xiàn)b賦值了,a卻沒有賦值,(注意這種不一致不是由緩存不一致造成的,而是處理器寫操作完成的順序不一致造成的),這時就要在a賦值與b賦值之間,加一個寫屏障。

多處理器間同步

有了SMP之后,線程就開始同時在多個處理器上運行。只要是線程就有通信和同步的要求。幸好SMP系統(tǒng)是共享內(nèi)存的,也就是所有處理器看到的內(nèi)存內(nèi)容都一樣,雖然有獨立的L1  cache,但還是由硬件完成了緩存一致性處理的問題。那不同處理器上的線程要訪問同一數(shù)據(jù),需要臨界區(qū),需要同步。靠什么同步?之前在UP系統(tǒng)中,我們上靠信號量,下靠關(guān)中斷和讀修改寫指令?,F(xiàn)在在SMP系統(tǒng)中,關(guān)中斷已經(jīng)廢了,雖然為了同步同一處理器上的線程還是需要的,但只靠它已經(jīng)不行了。讀修改寫指令?也不行了。在你指令中讀操作完成寫操作還沒進行時,就可能有另外的處理器進行了讀操作或者寫操作。緩存一致性協(xié)議是先進,但還沒有先進到預(yù)測這條讀操作是哪種指令發(fā)出來的。所以x86又發(fā)明了帶lock前綴的指令。在此指令執(zhí)行時,會將所有包含指令中讀寫地址的cache  line失效,并鎖定內(nèi)存總線。這樣別的處理器要想對同樣的地址或者同一個cache  line上的地址讀寫,既無法從cache中進行(cache中相關(guān)line已經(jīng)失效了),也無法從內(nèi)存總線上進行(整個內(nèi)存總線都鎖了),終于達到了原子性執(zhí)行的目的。當然,從P6處理器開始,如果帶lock前綴指令  要訪問的地址本來就在cache中,就無需鎖內(nèi)存總線,也能完成原子性操作了(雖然我懷疑這是因為加了多處理器內(nèi)部公共的L2 cache的緣故)。

因為會鎖內(nèi)存總線,所以帶lock前綴指令執(zhí)行前,也會先將未完成的讀寫操作完成,也起到內(nèi)存屏障的功能。

現(xiàn)在多處理器間線程的同步,上用自旋鎖,下用這種帶了lock前綴的讀修改寫指令。當然,實際的同步還有加上禁止本處理器任務(wù)調(diào)度的,有加上任務(wù)關(guān)中斷的,還會在外面加上信號量的外衣。linux中對這種自旋鎖的實現(xiàn),已歷經(jīng)四代發(fā)展,變得愈發(fā)高效強大。

內(nèi)存屏障的實現(xiàn)

#ifdef CONFIG_SMP  #define smp_mb() mb()  #define smp_rmb() rmb()  #define smp_wmb() wmb()  #else  #define smp_mb() barrier()  #define smp_rmb() barrier()  #define smp_wmb() barrier()  #endif

CONFIG_SMP就是用來支持多處理器的。如果是UP(uniprocessor)系統(tǒng),就會翻譯成barrier()。

#define barrier() __asm__ __volatile__("": : :"memory")

barrier()的作用,就是告訴編譯器,內(nèi)存的變量值都改變了,之前存在寄存器里的變量副本無效,要訪問變量還需再訪問內(nèi)存。這樣做足以滿足UP中所有的內(nèi)存屏障。

#ifdef CONFIG_X86_32  /*  * Some non-Intel clones support out of order store. wmb() ceases to be a  * nop for these.  */  #define mb() alternative("lock; addl $0,0(%%esp)", "mfence", X86_FEATURE_XMM2)  #define rmb() alternative("lock; addl $0,0(%%esp)", "lfence", X86_FEATURE_XMM2)  #define wmb() alternative("lock; addl $0,0(%%esp)", "sfence", X86_FEATURE_XMM)  #else  #define mb() asm volatile("mfence":::"memory")  #define rmb() asm volatile("lfence":::"memory")  #define wmb() asm volatile("sfence" ::: "memory")  #endif

如果是SMP系統(tǒng),內(nèi)存屏障就會翻譯成對應(yīng)的mb()、rmb()和wmb()。這里CONFIG_X86_32的意思是說這是一個32位x86系統(tǒng),否則就是64位的x86系統(tǒng)。現(xiàn)在的linux內(nèi)核將32位x86和64位x86融合在同一個x86目錄,所以需要增加這個配置選項。

可以看到,如果是64位x86,肯定有mfence、lfence和sfence三條指令,而32位的x86系統(tǒng)則不一定,所以需要進一步查看cpu是否支持這三條新的指令,不行則用加鎖的方式來增加內(nèi)存屏障。

SFENCE,LFENCE,MFENCE指令提供了高效的方式來保證讀寫內(nèi)存的排序,這種操作發(fā)生在產(chǎn)生弱排序數(shù)據(jù)的程序和讀取這個數(shù)據(jù)的程序之間。

SFENCE——串行化發(fā)生在SFENCE指令之前的寫操作但是不影響讀操作。

LFENCE——串行化發(fā)生在SFENCE指令之前的讀操作但是不影響寫操作。

MFENCE——串行化發(fā)生在MFENCE指令之前的讀寫操作。

sfence:在sfence指令前的寫操作當必須在sfence指令后的寫操作前完成。

lfence:在lfence指令前的讀操作當必須在lfence指令后的讀操作前完成。

mfence:在mfence指令前的讀寫操作當必須在mfence指令后的讀寫操作前完成。

至于帶lock的內(nèi)存操作,會在鎖內(nèi)存總線之前,就把之前的讀寫操作結(jié)束,功能相當于mfence,當然執(zhí)行效率上要差一些。

到此,相信大家對“Linux內(nèi)核中的內(nèi)存屏障知識點有哪些”有了更深的了解,不妨來實際操作一番吧!這里是億速云網(wǎng)站,更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢,關(guān)注我們,繼續(xù)學(xué)習!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI