生信流程搭建之snakemake--模塊化

模塊化之level 1---簡單封裝

Snakemake包裝器存儲庫是可重復使用包裝器的集合,可用于快速使用Snakemake規(guī)則和工作流中的流行工具

    input:
        "mapped/{sample}.bam"
    output:
        "mapped/{sample}.sorted.bam"
    params:
        "-m 4G"
    threads: 8
    wrapper:
        "0.2.0/bio/samtools/sort"

在這里漠趁,Snakemake將自動從https://bitbucket.org/snakemake/snakemake-wrappers/src/0.2.0/bio/samtools/sort/wrapper.py下載相應的包裝器袋倔。因此戏蔑,0.2.0可以替換為您要使用的version標記commit id假栓。由于包裝器實現(xiàn)中的更改不會自動傳播到您的工作流程中,因此可確笔〕牛可重復性。替代地俯在,例如竟秫,對于開發(fā)而言,包裝程序指令還可以指向完整的URL朝巫,包括本地URL file://鸿摇。
每個包裝器都定義必需的軟件包和版本。結合--use-condaSnakemake 的標志劈猿,這些將自動部署拙吉。

模塊化之level2---大型分析流程的整合

對于應集成到通用工作流程中的較大的可重復使用的部件,建議編寫小的Snakefile揪荣,然后通過include語句將其包含在主Snakefile中筷黔。在這種設置中,所有規(guī)則都共享一個公共配置文件仗颈。

include: "path/to/other/snakefile"

默認的目標規(guī)則(通常稱為all-rule)不會受到include的影響佛舱。也就是說,無論您有多少個包含在第一個規(guī)則之上的內(nèi)容挨决,它始終將是Snakefile中的第一個規(guī)則请祖。包含是相對于出現(xiàn)它們的Snakefile目錄的。例如脖祈,如果以上Snakefile駐留在directory中my/dir肆捕,則Snakemake將在處搜索include my/dir/path/to/other/snakefile,而與工作目錄無關盖高。

模塊化之level 3---構建子工作流程

除了包括其他工作流程的規(guī)則外慎陵,Snakemake還允許依賴于其他工作流程的輸出作為子工作流程。在執(zhí)行當前工作流程之前喻奥,將獨立執(zhí)行子工作流程冻璃。因此转绷,Snakemake可以確保在必要時創(chuàng)建或更新當前工作流程所依賴的所有文件症昏。這允許在原本單獨的數(shù)據(jù)分析之間創(chuàng)建鏈接顶吮。

subworkflow otherworkflow:
    workdir:
        "../path/to/otherworkflow"
    snakefile:
        "../path/to/otherworkflow/Snakefile"
    configfile:
        "path/to/custom_configfile.yaml"

rule a:
    input:
        otherworkflow("test.txt")
    output: ...
    shell:  ...

在這里,子工作流被命名為“ otherworkflow”,它位于工作目錄中../path/to/otherworkflow仆救。snakefile位于同一目錄中抒和,并稱為Snakefile。如果snakefile未為子工作流定義彤蔽,則假定它位于workdir位置并稱為Snakefile摧莽,因此,在上面我們也可以省略snakefile關鍵字顿痪。如果workdir未指定镊辕,則假定與當前相同。(可選的)定義configfile允許根據(jù)需要參數(shù)化子工作流蚁袭。從我們依賴的子工作流輸出的文件將標有otherworkflow功能(請參見規(guī)則a的輸入)征懈。此功能自動確定文件的絕對路徑(在此處../path/to/otherworkflow/test.txt)。

在執(zhí)行時揩悄,snakemake首先嘗試通過執(zhí)行子工作流來創(chuàng)建(或更新卖哎,如果需要)test.txt(以及所有其他可能提到的依賴項)。然后執(zhí)行當前的工作流程删性。這也可以遞歸發(fā)生亏娜,因為子工作流也可能有其自己的子工作流。

最后編輯于
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末蹬挺,一起剝皮案震驚了整個濱河市维贺,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌巴帮,老刑警劉巖溯泣,帶你破解...
    沈念sama閱讀 205,874評論 6 479
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異榕茧,居然都是意外死亡垃沦,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,151評論 2 382
  • 文/潘曉璐 我一進店門用押,熙熙樓的掌柜王于貴愁眉苦臉地迎上來肢簿,“玉大人,你說我怎么就攤上這事只恨∫胝蹋” “怎么了抬虽?”我有些...
    開封第一講書人閱讀 152,270評論 0 342
  • 文/不壞的土叔 我叫張陵官觅,是天一觀的道長。 經(jīng)常有香客問我阐污,道長休涤,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,137評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮功氨,結果婚禮上序苏,老公的妹妹穿的比我還像新娘。我一直安慰自己捷凄,他們只是感情好忱详,可當我...
    茶點故事閱讀 64,116評論 5 370
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著跺涤,像睡著了一般匈睁。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上桶错,一...
    開封第一講書人閱讀 48,935評論 1 283
  • 那天航唆,我揣著相機與錄音,去河邊找鬼院刁。 笑死糯钙,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的退腥。 我是一名探鬼主播任岸,決...
    沈念sama閱讀 38,261評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼阅虫!你這毒婦竟也來了演闭?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 36,895評論 0 259
  • 序言:老撾萬榮一對情侶失蹤颓帝,失蹤者是張志新(化名)和其女友劉穎米碰,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體购城,經(jīng)...
    沈念sama閱讀 43,342評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡吕座,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,854評論 2 323
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了瘪板。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片吴趴。...
    茶點故事閱讀 37,978評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖侮攀,靈堂內(nèi)的尸體忽然破棺而出锣枝,到底是詐尸還是另有隱情,我是刑警寧澤兰英,帶...
    沈念sama閱讀 33,609評論 4 322
  • 正文 年R本政府宣布撇叁,位于F島的核電站,受9級特大地震影響畦贸,放射性物質發(fā)生泄漏陨闹。R本人自食惡果不足惜楞捂,卻給世界環(huán)境...
    茶點故事閱讀 39,181評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望趋厉。 院中可真熱鬧寨闹,春花似錦、人聲如沸君账。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,182評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽乡数。三九已至帖蔓,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間瞳脓,已是汗流浹背塑娇。 一陣腳步聲響...
    開封第一講書人閱讀 31,402評論 1 260
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留劫侧,地道東北人埋酬。 一個月前我還...
    沈念sama閱讀 45,376評論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像烧栋,于是被迫代替她去往敵國和親写妥。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,677評論 2 344

推薦閱讀更多精彩內(nèi)容

  • 使用Snakemake搭建分析流程 目前已有的框架 A review of bioinformatics pipe...
    xuzhougeng閱讀 21,446評論 10 88
  • 官網(wǎng) 中文版本 好的網(wǎng)站 Content-type: text/htmlBASH Section: User ...
    不排版閱讀 4,367評論 0 5
  • 【4-6 動待花開】20171006數(shù)理媽媽思維營D18 1.今天做了月餅审姓,讓娃數(shù)數(shù)有幾個珍特?15個,寶寶吃掉2個魔吐,...
    拉美兒閱讀 133評論 0 0
  • 四月十二日扎筒,在青島實驗學校舉行了運動會選拔,我參加的是800賽跑酬姆,前邊有很長一段的等候時間嗜桌。 終于輪...
    肖雅文888閱讀 316評論 0 0
  • 文/月明紅紅 清晨總是給人美好的 當我看見第一縷陽光 灑進我的房間 心頭就充滿了感激 感謝給我?guī)砹藴嘏?感謝給生...
    月明紅紅閱讀 211評論 19 30