數(shù)據(jù)競爭及其靜態(tài)檢測

  • 背景
  • 例子
  • Data Race 數(shù)據(jù)競爭
  • 靜態(tài)檢測
  • 局限性

一绷蹲、背景

多線程的bug一直都是難以發(fā)現(xiàn)的,在之前的JMCR系列中顾孽,介紹了一種動態(tài)檢測多線程程序錯誤的方法祝钢,然而這種動態(tài)方法在實(shí)際生產(chǎn)應(yīng)用中存在一些局限性,需要軟件動態(tài)運(yùn)行若厚,軟件工程指導(dǎo)我們:一個錯誤發(fā)現(xiàn)的越晚拦英,為改正它所付出的代價越大,而一個產(chǎn)品/模塊得到可運(yùn)行的時期時测秸,已經(jīng)是整個軟件過程的晚期了疤估。如果有一種方法可以在編碼階段就提示用戶潛在的多線程bug及時修復(fù)灾常,則可以將錯誤扼殺于搖籃之中。

二铃拇、例子

靜態(tài)檢測所檢測到內(nèi)容钞瀑,就是程序中的所有數(shù)據(jù)競爭,在介紹檢測的原理之前慷荔,我們來詳細(xì)了解一下數(shù)據(jù)競爭仔戈。
來觀察一下下面的程序

public class Add {
    public int x = 0;
  
    // 完成x自增操作    
    public void increment() { 
        // x++ 等價于 temp = x;  x = temp+1;          
        x++; 
    }
}

class Action extends Thread{
    public Add add;
    int total;

    public Action(Add add, int total) {
        this.add = add;
        this.total = total;
    }

    @Override
    public void run() {
        for(int i = 0; i < total; i ++){
            this.add.increment();
        }
    }
}

public class Test{

    static final int COUNT = 1000;

    public static void main(String[] args) throws InterruptedException {
        List<Integer> list = new ArrayList<>();
        for (int i = 0; i < 10; i++) {
            list.add(test());
        }
        System.out.println(list);
    }

    public static int test() throws InterruptedException {
        Add add = new Add();
        Action a1 = new Action(add, COUNT);
        Action a2 = new Action(add, COUNT);

        a1.start(); a2.start();
        a1.join();  a2.join();

        return add.getX();
    }
}

上述代碼的意圖是 a1 和 a2 兩個線程對于同一個 Add 類對象 add,分別調(diào)用 1000 次 increment() 函數(shù)拧廊,將 add 中的成員變量 x 增加 2000,然而這段程序運(yùn)行結(jié)果是:

運(yùn)行結(jié)果

出現(xiàn)了非 2000 的結(jié)果晋修,這是為什么呢吧碾?

    // 完成x自增操作    
    public void increment() { 
        // x++ 等價于 temp = x;  x = temp+1;          
        x++; 
    }

我們來關(guān)注一下在Add類中的 increment() 函數(shù),值得一提的是墓卦,x++ 這一操作倦春,并非原子操作,實(shí)際上是先將 x 的值讀取到臨時變量 temp 中落剪,再將 temp + 1 的值賦值給 x睁本。

x 不能直接等于 x + 1 的原因是匯編語言(機(jī)器碼)不允許賦值(mov)、計(jì)算(add/sub等)語句中同時操作兩次內(nèi)存忠怖。訪問內(nèi)存的時間遠(yuǎn)遠(yuǎn)大于訪問寄存器的時間呢堰,會使得執(zhí)行速度變慢。

我們考慮一下下面這種線程交錯情況:


Bugly interleaving

兩個線程對同一個 Add 對象的 x 變量兩次自增操作只讓 x 從 0 變成了 1凡泣,我們找到了多線程中的錯誤源頭枉疼,我們再來觀察下正常情況:


Expected Interleaving

不難看出,兩次調(diào)度的區(qū)別在于語句 x = temp + 1; 和 'temp = x;' 的順序不同鞋拟。這兩個語句骂维,就是一個 Data Race,數(shù)據(jù)競爭贺纲。

三航闺、Data Race 數(shù)據(jù)競爭

數(shù)據(jù)競爭總是由一對操作構(gòu)成,且是兩個線程對于同一個線程內(nèi)共享變量進(jìn)行操作猴誊。數(shù)據(jù)競爭有兩種潦刃,一種是讀寫沖突,一種是寫寫沖突:

  • 讀寫沖突
    考慮只有讀寫兩句話的情況稠肘,可能的交錯序列如下


    possible interleavings

    交錯序列的不同導(dǎo)致了線程1讀到了不同的 x福铅。

  • 寫寫沖突
    考慮只有讀寫兩句話的情況,可能的交錯序列如下


    3.png

    交錯序列的不同導(dǎo)致了接下來任何一個線程讀 x 會不同项阴。

我們發(fā)現(xiàn):Race condition 的兩個操作如果顛倒順序滑黔,會導(dǎo)致程序狀態(tài)不同【1】笆包。 程序運(yùn)行中可能會出現(xiàn)多種狀態(tài),導(dǎo)致了多線程程序運(yùn)行的不確定性略荡,從而導(dǎo)致出錯的可能庵佣。如果可以適當(dāng)?shù)丶渔i防止互為數(shù)據(jù)競爭的兩個操作交換順序執(zhí)行,則可以預(yù)防多線程的錯誤汛兜。

四巴粪、靜態(tài)檢測

  1. 指針圖(Point To Graph,PTG)
    Java 程序中的每一個賦值語句 a = b;粥谬,表示了將 b 的指針賦給 a肛根,此時 a 和 b 同時指向同一片內(nèi)存,在指針圖中表示為 b 指向 a漏策。將上面的程序轉(zhuǎn)化為如下的指針圖:

    PTG

    可以看到 a 同時指向了 a1.add 和 a2.add派哲,因此我們得知 main 函數(shù)中的 add 是共享變量,a1.add 和 a2.add 同時指向 main 函數(shù)的 add掺喻。即芭届,在 PTG 中,從某一個節(jié)點(diǎn)出發(fā)感耙,通過兩條不同的路徑可以分別到達(dá)的兩個節(jié)點(diǎn)共享同一片內(nèi)存褂乍。

  2. happens-before關(guān)系圖(Happens Before Graph,HBG)
    將上面的實(shí)例程序抽象為執(zhí)行順序圖如下即硼,特別的逃片,一個線程的開始和結(jié)束分別記錄為 begin 和 end 事件:


    4.png

    一個程序中中的部分節(jié)點(diǎn)和節(jié)點(diǎn)之間存在happens-before關(guān)系。類型如下:

    • Must Happens Before
      begin 事件只能作為線程中的第一個事件發(fā)生只酥,并且只能在該線程被另一個線程 fork 之后發(fā)生题诵。 end 事件只能作為線程中的最后一個事件發(fā)生,而 join 事件只能在被 join 線程的 end 事件之后發(fā)生层皱。

      main 線程的 a1.start() Happens Before 于 a1 線程 begin 事件
      a2 線程 end 事件 Happens Before 于 main 線程的 a2.join()

    • 線程內(nèi)串行
      線程內(nèi)的第n個事件 Happens Before 于第 n+1 個事件性锭。

      a1 線程 begin 事件 Happens Before 于 a1 線程的 temp = x;
      a2 線程的 x = temp+1 Happens Before 于 a2 線程的 end 事件

    • 傳遞性
      事件a Happens Before 于事件 b,且事件 b Happens Before 于事件 c叫胖。則事件 a Happens Before 于事件 c草冈。

  3. 檢測
    對于一個程序,我們進(jìn)行靜態(tài)分析瓮增,可以得到其 PTG 和 HBG怎棱,PTG可以讓我們知道Java中的兩個變量是否引用了同一片內(nèi)存,HBG可以判斷兩個操作有無happens-before關(guān)系绷跑。
    檢測的思路為:如果兩個對于同一個變量x拳恋,可以存在相鄰的讀讀/讀寫操作,且兩個操作沒有明確的 happensbefore 關(guān)系砸捏,就可以認(rèn)為這兩個操作形成了數(shù)據(jù)競爭谬运。

這里的相鄰指的是隙赁,兩個操作之間沒有對于 x 的其他讀寫操作。

五梆暖、 局限性與優(yōu)勢

局限性

  • 靜態(tài)檢測目前(state of the art)僅限于data race的檢測伞访。data race本身存在良性和惡性之分。
  • 靜態(tài)檢測基于的是代碼靜態(tài)掃描轰驳,對于if分支厚掷、for循環(huán)等邏輯性強(qiáng)的程序表現(xiàn)不佳,可能對于某種程序類型出現(xiàn)大量 false positive级解。

優(yōu)勢

  • 靜態(tài)檢測可以進(jìn)行增量檢測冒黑,使得靜態(tài)檢測速度遠(yuǎn)快于動態(tài),可以集成進(jìn)入IDE做成實(shí)時監(jiān)測插件(D4 's work)勤哗。
  • 靜態(tài)檢測處于軟件編碼階段薛闪,可以盡早地發(fā)現(xiàn)錯誤,利于軟件開發(fā)俺陋。
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市昙篙,隨后出現(xiàn)的幾起案子腊状,更是在濱河造成了極大的恐慌,老刑警劉巖苔可,帶你破解...
    沈念sama閱讀 218,941評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件缴挖,死亡現(xiàn)場離奇詭異,居然都是意外死亡焚辅,警方通過查閱死者的電腦和手機(jī)映屋,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,397評論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來同蜻,“玉大人棚点,你說我怎么就攤上這事⊥迓” “怎么了瘫析?”我有些...
    開封第一講書人閱讀 165,345評論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長默责。 經(jīng)常有香客問我贬循,道長,這世上最難降的妖魔是什么桃序? 我笑而不...
    開封第一講書人閱讀 58,851評論 1 295
  • 正文 為了忘掉前任杖虾,我火速辦了婚禮,結(jié)果婚禮上媒熊,老公的妹妹穿的比我還像新娘奇适。我一直安慰自己坟比,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,868評論 6 392
  • 文/花漫 我一把揭開白布滤愕。 她就那樣靜靜地躺著温算,像睡著了一般。 火紅的嫁衣襯著肌膚如雪间影。 梳的紋絲不亂的頭發(fā)上注竿,一...
    開封第一講書人閱讀 51,688評論 1 305
  • 那天,我揣著相機(jī)與錄音魂贬,去河邊找鬼巩割。 笑死,一個胖子當(dāng)著我的面吹牛付燥,可吹牛的內(nèi)容都是我干的宣谈。 我是一名探鬼主播,決...
    沈念sama閱讀 40,414評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼键科,長吁一口氣:“原來是場噩夢啊……” “哼闻丑!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起勋颖,我...
    開封第一講書人閱讀 39,319評論 0 276
  • 序言:老撾萬榮一對情侶失蹤嗦嗡,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后饭玲,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體侥祭,經(jīng)...
    沈念sama閱讀 45,775評論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,945評論 3 336
  • 正文 我和宋清朗相戀三年茄厘,在試婚紗的時候發(fā)現(xiàn)自己被綠了矮冬。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,096評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡次哈,死狀恐怖胎署,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情窑滞,我是刑警寧澤硝拧,帶...
    沈念sama閱讀 35,789評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站葛假,受9級特大地震影響障陶,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜聊训,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,437評論 3 331
  • 文/蒙蒙 一抱究、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧带斑,春花似錦鼓寺、人聲如沸勋拟。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,993評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽敢靡。三九已至,卻和暖如春苦银,著一層夾襖步出監(jiān)牢的瞬間啸胧,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,107評論 1 271
  • 我被黑心中介騙來泰國打工幔虏, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留纺念,地道東北人。 一個月前我還...
    沈念sama閱讀 48,308評論 3 372
  • 正文 我出身青樓想括,卻偏偏與公主長得像陷谱,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子瑟蜈,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,037評論 2 355

推薦閱讀更多精彩內(nèi)容