解決java調(diào)用shell假死問題(死鎖)

問題:使用java調(diào)用shell腳本進行模型訓(xùn)練時疯暑,跑到一半就卡死,單獨執(zhí)行shell腳本則沒有問題缸濒。
因為需求比較簡單,無需等待返回結(jié)果,原執(zhí)行方法如下:

private void exec(String script) throws IOException {
        Runtime.getRuntime().exec(script);
}

后進行搜索绍填,找到并修改成如下代碼霎桅,死鎖問題解決。

import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;

public class CmdExecutor {

    public void exec(String cmd) {
        try {
            Process proc = Runtime.getRuntime().exec(cmd);
            GobblerThread errorGobbler = new GobblerThread(proc.getErrorStream(), "ERROR");
            GobblerThread outputGobbler = new GobblerThread(proc.getInputStream(), "OUTPUT");
            errorGobbler.start();
            outputGobbler.start();
            proc.waitFor();
            logger.info("Exec Algorithm script: {}", cmd);
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    class GobblerThread extends Thread {
        InputStream is;
        String type;

        GobblerThread(InputStream is, String type) {
            this.is = is;
            this.type = type;
        }

        public void run() {
            try {
                InputStreamReader isr = new InputStreamReader(is);
                BufferedReader br = new BufferedReader(isr);
                String line = null;
                while ((line = br.readLine()) != null) {
                        System.out.println(line);
                }

            } catch (IOException e) {
                e.printStackTrace();
            }
        }
    }
}

原因

JDK幫助文檔上這么說:如有必要讨永,一直要等到由該 Process 對象表示的進程已經(jīng)終止滔驶。如果已終止該子進程,此方法立即返回卿闹。但是直接調(diào)用這個方法會導(dǎo)致當(dāng)前線程阻塞揭糕,直到退出子進程。對此JDK文檔上還有如此解釋:因為本地的系統(tǒng)對標準輸入和輸出所提供的緩沖池有效锻霎,所以錯誤的對標準輸出快速的寫入和從標準輸入快速的讀入都有可能造成子進程的所著角,甚至死鎖。問題的關(guān)鍵在緩沖區(qū)這個地方:可執(zhí)行程序的標準輸出比較多旋恼,而運行窗口的標準緩沖區(qū)不夠大吏口,所以發(fā)生阻塞。
接著來分析緩沖區(qū)冰更,哪來的這個東西,當(dāng)Runtime對象調(diào)用exec(cmd)后产徊,JVM會啟動一個子進程,該進程會與JVM進程建立三個管道連接:標準輸入蜀细,標準輸出和標準錯誤流舟铜。假設(shè)該程序不斷在向標準輸出流和標準錯誤流寫數(shù)據(jù),而JVM不讀取的話奠衔,當(dāng)緩沖區(qū)滿之后將無法繼續(xù)寫入數(shù)據(jù)谆刨,最終造成阻塞在waitfor()這里。 因此網(wǎng)上的解決方法是開兩個線程在waitfor()命令之前讀出窗口的標準輸出緩沖區(qū)和標準錯誤流的內(nèi)容归斤。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末痊夭,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子官册,更是在濱河造成了極大的恐慌生兆,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,214評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件膝宁,死亡現(xiàn)場離奇詭異鸦难,居然都是意外死亡,警方通過查閱死者的電腦和手機员淫,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評論 2 382
  • 文/潘曉璐 我一進店門合蔽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人介返,你說我怎么就攤上這事拴事∥纸铮” “怎么了?”我有些...
    開封第一講書人閱讀 152,543評論 0 341
  • 文/不壞的土叔 我叫張陵刃宵,是天一觀的道長衡瓶。 經(jīng)常有香客問我,道長牲证,這世上最難降的妖魔是什么哮针? 我笑而不...
    開封第一講書人閱讀 55,221評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮坦袍,結(jié)果婚禮上十厢,老公的妹妹穿的比我還像新娘。我一直安慰自己捂齐,他們只是感情好蛮放,可當(dāng)我...
    茶點故事閱讀 64,224評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著奠宜,像睡著了一般包颁。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上挎塌,一...
    開封第一講書人閱讀 49,007評論 1 284
  • 那天徘六,我揣著相機與錄音内边,去河邊找鬼榴都。 笑死,一個胖子當(dāng)著我的面吹牛漠其,可吹牛的內(nèi)容都是我干的嘴高。 我是一名探鬼主播,決...
    沈念sama閱讀 38,313評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼和屎,長吁一口氣:“原來是場噩夢啊……” “哼拴驮!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起柴信,我...
    開封第一講書人閱讀 36,956評論 0 259
  • 序言:老撾萬榮一對情侶失蹤套啤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后随常,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體潜沦,經(jīng)...
    沈念sama閱讀 43,441評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,925評論 2 323
  • 正文 我和宋清朗相戀三年绪氛,在試婚紗的時候發(fā)現(xiàn)自己被綠了唆鸡。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,018評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡枣察,死狀恐怖争占,靈堂內(nèi)的尸體忽然破棺而出燃逻,到底是詐尸還是另有隱情,我是刑警寧澤臂痕,帶...
    沈念sama閱讀 33,685評論 4 322
  • 正文 年R本政府宣布伯襟,位于F島的核電站,受9級特大地震影響握童,放射性物質(zhì)發(fā)生泄漏逗旁。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,234評論 3 307
  • 文/蒙蒙 一舆瘪、第九天 我趴在偏房一處隱蔽的房頂上張望片效。 院中可真熱鬧,春花似錦英古、人聲如沸淀衣。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽膨桥。三九已至,卻和暖如春唠叛,著一層夾襖步出監(jiān)牢的瞬間只嚣,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評論 1 261
  • 我被黑心中介騙來泰國打工艺沼, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留册舞,地道東北人。 一個月前我還...
    沈念sama閱讀 45,467評論 2 352
  • 正文 我出身青樓障般,卻偏偏與公主長得像调鲸,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子挽荡,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,762評論 2 345

推薦閱讀更多精彩內(nèi)容