WDL

WDL (一個workflow description language)+ Cromwell(an execution engine that can run WDL scripts)是目前可以更好使用GATK的一套工具琅捏。

阿里云批量計算:https://help.aliyun.com/document_detail/110173.html

主要組成

  • workflow, task and call象迎。
  • workflow在頂層附较,用calls去執(zhí)行tasks。tasks在workflow模塊外被定義验毡。
  • 變量:有2種不同層次的variables,一種存在于task杜顺,一種存在于整個workflow采幌。variable也可以從一個task傳遞到下一個task

workflow

workflow myWorkFlowName {
    call task_A
    call task_B
}
task task_A{...}
task task_B{...}

task

task task_A {
    File ref
    File in
    String id
    command {
      do_stuff R=${ref} I=${in} O=${id}.ext
    }
    runtime{
    docker: "ubuntu:latest"
    memory: "2GB"
    }
    output {
      File out="${id}.ext"
    }
}
  • 變量:變量需要定義其類型,主要有File靠粪, String, Array[]蜡吧。在command中引用需要${var}。
  • command : 定義運行的命令
  • output: 定義輸出的變量和文件
  • runtime: 定義運行的環(huán)境

call

call是通過workflow調(diào)用task占键。若需要輸入昔善,通過{input:}

workflow myWorkflowName {
    File my_ref
    File my_input
    String name
    call task_A {
    input: ref=my_ref, in=my_input, id=name
    }
    call task_B {
    input: ref=my_ref, in=task_A.out
    }
}

任務調(diào)度:Scatter-Gather

Parallelism即平行可以使得任務更快,而非順序進行畔乙。我們使用了基于WDL standard library的scatter君仆,會產(chǎn)生可平行的任務(成為一列Input,array)牲距,并且會輸出結(jié)果(也是array)返咱。Scatter這個過程是外顯的(explicit),而gather這個過程是不外顯的(implicit)牍鞠。

Array[file] inputFiles
    sactter (oneFile in inputFiles) {
    call stepA {input: in=oneFile}
    }
    call stepB {input: files=stepA.out}
call stepA as firstSample {input: in=firstInput}
call stepA as secondSample {input: in=secondInput}
call stepB {input: in=firstSample.out}
call stepB {input: in=secondSample.out}
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末咖摹,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子难述,更是在濱河造成了極大的恐慌萤晴,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,968評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件龄广,死亡現(xiàn)場離奇詭異硫眯,居然都是意外死亡,警方通過查閱死者的電腦和手機择同,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評論 2 382
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來净宵,“玉大人敲才,你說我怎么就攤上這事裹纳。” “怎么了紧武?”我有些...
    開封第一講書人閱讀 153,220評論 0 344
  • 文/不壞的土叔 我叫張陵剃氧,是天一觀的道長。 經(jīng)常有香客問我阻星,道長朋鞍,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,416評論 1 279
  • 正文 為了忘掉前任妥箕,我火速辦了婚禮滥酥,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘畦幢。我一直安慰自己坎吻,他們只是感情好,可當我...
    茶點故事閱讀 64,425評論 5 374
  • 文/花漫 我一把揭開白布宇葱。 她就那樣靜靜地躺著瘦真,像睡著了一般。 火紅的嫁衣襯著肌膚如雪黍瞧。 梳的紋絲不亂的頭發(fā)上诸尽,一...
    開封第一講書人閱讀 49,144評論 1 285
  • 那天,我揣著相機與錄音印颤,去河邊找鬼您机。 笑死,一個胖子當著我的面吹牛膀哲,可吹牛的內(nèi)容都是我干的往产。 我是一名探鬼主播,決...
    沈念sama閱讀 38,432評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼某宪,長吁一口氣:“原來是場噩夢啊……” “哼仿村!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起兴喂,我...
    開封第一講書人閱讀 37,088評論 0 261
  • 序言:老撾萬榮一對情侶失蹤蔼囊,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后衣迷,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體畏鼓,經(jīng)...
    沈念sama閱讀 43,586評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,028評論 2 325
  • 正文 我和宋清朗相戀三年壶谒,在試婚紗的時候發(fā)現(xiàn)自己被綠了云矫。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,137評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡汗菜,死狀恐怖让禀,靈堂內(nèi)的尸體忽然破棺而出挑社,到底是詐尸還是另有隱情,我是刑警寧澤巡揍,帶...
    沈念sama閱讀 33,783評論 4 324
  • 正文 年R本政府宣布痛阻,位于F島的核電站,受9級特大地震影響腮敌,放射性物質(zhì)發(fā)生泄漏阱当。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,343評論 3 307
  • 文/蒙蒙 一糜工、第九天 我趴在偏房一處隱蔽的房頂上張望弊添。 院中可真熱鬧,春花似錦啤斗、人聲如沸表箭。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽免钻。三九已至,卻和暖如春崔拥,著一層夾襖步出監(jiān)牢的瞬間极舔,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評論 1 262
  • 我被黑心中介騙來泰國打工链瓦, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留拆魏,地道東北人。 一個月前我還...
    沈念sama閱讀 45,595評論 2 355
  • 正文 我出身青樓慈俯,卻偏偏與公主長得像渤刃,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子贴膘,可洞房花燭夜當晚...
    茶點故事閱讀 42,901評論 2 345

推薦閱讀更多精彩內(nèi)容