轉(zhuǎn)錄組入門(6): reads計(jì)數(shù)

要求

實(shí)現(xiàn)這個(gè)功能的軟件也很多扫皱,還是煩請大家先自己搜索幾個(gè)教程足绅,入門請統(tǒng)一用htseq-count捷绑,對每個(gè)樣本都會(huì)輸出一個(gè)表達(dá)量文件。

需要用腳本合并所有的樣本為表達(dá)矩陣氢妈。參考:生信編程直播第四題:多個(gè)同樣的行列式文件合并起來

對這個(gè)表達(dá)矩陣可以自己簡單在excel或者R里面摸索粹污,求平均值,方差首量。

看看一些生物學(xué)意義特殊的基因表現(xiàn)如何壮吩,比如GAPDH,β-ACTIN等等。

理論基礎(chǔ)

在上篇的比對中加缘,我們需要糾結(jié)是否真的需要比對鸭叙,如果你只需要知道已知基因的表達(dá)情況,那么可以選擇alignment-free工具(例如salmon, sailfish)拣宏,如果你需要找到noval isoforms沈贝,那么就需要alignment-based工具(如HISAT2, STAR)。到了這一篇的基因(轉(zhuǎn)錄本)定量勋乾,需要考慮的因素就更加多了宋下,以至于我不知道如何說清才能理清邏輯仙逻。

定量分為三個(gè)水平

基因水平(gene-level)

轉(zhuǎn)錄本水平(transcript-level)

外顯子使用水平(exon-usage-level)伯病。

基因水平上规阀,常用的軟件為HTSeq-count队伟,featureCounts葵礼,BEDTools, Qualimap, Rsubread, GenomicRanges等颂龙。以常用的HTSeq-count為例葵第,這些工具要解決的問題就是根據(jù)read和基因位置的overlap判斷這個(gè)read到底是誰家的孩子税弃。值得注意的是不同工具對multimapping reads處理方式也是不同的绅你,例如HTSeq-count就直接當(dāng)它們不存在伺帘。而Qualimpa則是一人一份,平均分配忌锯。

_images/count_modes.png

對每個(gè)基因計(jì)數(shù)之后得到的count matrix再后續(xù)的分析中伪嫁,要注意標(biāo)準(zhǔn)化的問題。如果你要比較同一個(gè)樣本(within-sample)不同基因之間的表達(dá)情況偶垮,你就需要考慮到轉(zhuǎn)錄本長度张咳,因?yàn)檗D(zhuǎn)錄本越長,那么檢測的片段也會(huì)更多似舵,直接比較等于讓小孩和大人進(jìn)行賽跑脚猾。如果你是比較不同樣本(across sample)同一個(gè)基因的表達(dá)情況,雖然不必在意轉(zhuǎn)錄本長度砚哗,但是你要考慮到測序深度(sequence depth)龙助,畢竟測序深度越高,檢測到的概率越大蛛芥。除了這兩個(gè)因素外提鸟,你還需要考慮GC%所導(dǎo)致的偏差军援,以及測序儀器的系統(tǒng)偏差。目前對read count標(biāo)準(zhǔn)化的算法有RPKM(SE), FPKM(PE)称勋,TPM, TMM等胸哥,不同算法之間的差異與換算方法已經(jīng)有文章進(jìn)行整理和吐槽了。但是赡鲜,有一些下游分析的軟件會(huì)要求是輸入的count matrix是原始數(shù)據(jù)空厌,未經(jīng)標(biāo)準(zhǔn)化,比如說DESeq2银酬,這個(gè)時(shí)候你需要注意你上一步所用軟件會(huì)不會(huì)進(jìn)行標(biāo)準(zhǔn)化嘲更。

轉(zhuǎn)錄本水平上,一般常用工具為Cufflinks和它的繼任者StringTie捡硅, eXpress哮内。這些軟件要處理的難題就時(shí)轉(zhuǎn)錄本亞型(isoforms)之間通常是有重疊的,當(dāng)二代測序讀長低于轉(zhuǎn)錄本長度時(shí)壮韭,如何進(jìn)行區(qū)分北发?這些工具大多采用的都是expectation maximization(EM)。好在我們有三代測序喷屋。

上述軟件都是alignment-based琳拨,目前許多alignment-free軟件,如kallisto, silfish, salmon屯曹,能夠省去比對這一步狱庇,直接得到read count,在運(yùn)行效率上更高恶耽。不過最近一篇文獻(xiàn)[1]指出這類方法在估計(jì)豐度時(shí)存在樣本特異性和讀長偏差密任。

外顯子使用水平上,其實(shí)和基因水平的統(tǒng)計(jì)類似偷俭。但是值得注意的是為了更好的計(jì)數(shù)浪讳,我們需要提供無重疊的外顯子區(qū)域的gtf文件[2]。用于分析差異外顯子使用的DEXSeq提供了一個(gè)Python腳本(dexseq_prepare_annotation.py)執(zhí)行這個(gè)任務(wù)涌萤。

小結(jié)

計(jì)數(shù)分為三個(gè)水平: gene-level, transcript-level, exon-usage-level

標(biāo)準(zhǔn)化方法: FPKM RPKM TMM TPM

輸出表達(dá)矩陣

在RNA-Seq分析中淹遵,每一個(gè)基因就是一個(gè)feature(特征?)负溪,而基因被認(rèn)為是它的所有外顯子的和集透揣。在可變剪切分析中,可以單獨(dú)把每個(gè)外顯子當(dāng)作一個(gè)feature川抡。而在ChIP-Seq分析中辐真,feature則是預(yù)先定義的結(jié)合域。但是確定一個(gè)read到底屬于哪一個(gè)feature有時(shí)會(huì)非常棘手。因此HTSeq提供了三種模式拆祈,示意圖見前一幅圖

the union of all the sets S(i) for mode union. This mode is recommended for most use cases.

the intersection of all the sets S(i) for mode intersection-strict.

the intersection of all non-empty sets S(i) for mode intersection-nonempty.

基本用法非常的簡單:

# 安裝conda install htseq# 使用# htseq-count [options] <alignment_file> <gtf_file>htseq-count -r pos -f bam RNA-Seq/aligned/SRR3589957_sorted.bam reference/gencode.v26lift37.annotation.sorted.gtf > SRR3589957.count

用一個(gè)循環(huán)處理多個(gè)BAM文件(在/mnt/f/Data目錄下)

mkdir -p RNA-Seq/matrix/

for i in `seq 56 58`

do

? ? htseq-count -s no -r pos -f bam RNA-Seq/aligned/SRR35899${i}_sorted.bam reference/gencode.v26lift37.annotation.sorted.gtf > RNA-Seq/matrix/SRR35899${i}.count 2> RNA-Seq/matrix/SRR35899${i}.log

done

運(yùn)行的時(shí)間會(huì)比較久恨闪,所以可以去了解不同參數(shù)的用法了倘感,其中比較常用的為:

-f bam/sam: 指定輸入文件格式放坏,默認(rèn)SAM

-r name/pos: 你需要利用samtool sort對數(shù)據(jù)根據(jù)read name或者位置進(jìn)行排序,默認(rèn)是name

-s yes/no/reverse: 數(shù)據(jù)是否來自于strand-specific assay老玛。DNA是雙鏈的淤年,所以需要判斷到底來自于哪條鏈。如果選擇了no蜡豹, 那么每一條read都會(huì)跟正義鏈和反義鏈進(jìn)行比較麸粮。默認(rèn)的yes對于雙端測序表示第一個(gè)read都在同一個(gè)鏈上,第二個(gè)read則在另一條鏈上镜廉。

-a 最低質(zhì)量弄诲, 剔除低于閾值的read

-m 模式 union(默認(rèn)), intersection-strict and intersection-nonempty。一般而言就用默認(rèn)的娇唯,作者也是這樣認(rèn)為的齐遵。

-i id attribute: 在GTF文件的最后一欄里,會(huì)有這個(gè)基因的多個(gè)命名方式(如下)塔插, RNA-Seq數(shù)據(jù)分析常用的是gene_id梗摇, 當(dāng)然你可以寫一個(gè)腳本替換成其他命名方式。

gene_id "ENSG00000223972.5_2"; transcript_id "ENST00000456328.2_1"; gene_type "transcribed_unprocessed_pseudogene"; gene_name "DDX11L1"; transcript_type "processed_transcript"; transcript_name "DDX11L1-002"; exon_number 2; exon_id "ENSE00003582793.1_1"; level 2;...

Jimmy的伏筆

我們這次分析是人類mRNA-Seq測序的結(jié)果想许,但是我們其實(shí)只下載了3個(gè)sra文件伶授。一般而言RNA-Seq數(shù)據(jù)分析都至少要有2個(gè)重復(fù),所以必須要有4個(gè)sra文件才行流纹。我在仔細(xì)讀完文章的方法這一段以后糜烹,發(fā)現(xiàn)他們有一批數(shù)據(jù)用的是其他課題組的: For 293 cells, the mRNA-seq results of the control samples include (1) those from the doxycycline-treated parental Flp-In T-REx 293 cells by us and (2) those from the doxycycline-treated control Flp-In T-REx 293 cells performed by another group unrelated to us (sample GSM1095127 in GSE44976)。 然后和Jimmy交流之后漱凝,他也承認(rèn)自己只分析了小鼠的數(shù)據(jù)疮蹦,而沒有分析人類的數(shù)據(jù)。所以我們需要根據(jù)文章提供的線索下載另外一份數(shù)據(jù)碉哑,才能進(jìn)行下一步的分析挚币。

這個(gè)時(shí)候就有一個(gè)經(jīng)常被問到的問題:不同來源的RNA-Seq數(shù)據(jù)能夠直接比較嗎?甚至說如果不同來源的RNA-seq數(shù)據(jù)的構(gòu)建文庫都不一樣該如何比較?不同來源的RNA-Seq結(jié)果之間比較需要考慮批次效應(yīng)(batch effect)的影響扣典。

處理批次效應(yīng)妆毕,根據(jù)我搜索的結(jié)果,是不能使用FPKM/RPKM贮尖,關(guān)于這個(gè)標(biāo)準(zhǔn)化的吐槽笛粘,我在biostars上找到了如下觀點(diǎn):

FPKM/RPKM 不是標(biāo)準(zhǔn)化的方法,它會(huì)引入文庫特異的協(xié)變量

FPKM/RPKM has never been peer-reviewed, it has been introduced as an ad-hoc measure in a supplementary 沒有同行評審

One of the authors of this paper states, that it should not be used because of faulty arithmetic 作者說算法有問題

All reviews so far have shown it to be an inferior scale for DE analysis of genes Length normalization is mostly dispensable imo in DE analysis because gene length is constant

有人建議使用一個(gè)Bioconductor包http://www.bioconductor.org/packages/devel/bioc/html/sva.html我沒有具體了解,有生之年去了解補(bǔ)充薪前。

還有人引用了一篇文獻(xiàn) IVT-seq reveals extreme bias in RNA-sequencing 證明不同文庫的RNA-Seq結(jié)果會(huì)存在很大差異润努。

結(jié)論: 可以問下原作者他們是如何處理數(shù)據(jù)的,居然有一個(gè)居然沒有重復(fù)的分析也能過審示括。改用小鼠數(shù)據(jù)進(jìn)行分析铺浇。或者使用無重復(fù)的分析方法垛膝,或者模擬一份數(shù)據(jù)出來鳍侣,先把流程走完。

合并表達(dá)矩陣

HTSeq-count輸出結(jié)果是一個(gè)個(gè)獨(dú)立的文件吼拥,后續(xù)分析需要把多個(gè)文件合并成一個(gè)行為基因名倚聚,列為樣本名,中間為count的行列式文件凿可』笳郏肯定是不會(huì)用Excel手動(dòng)處理(雖然可以寫一個(gè)VBA腳本,但是數(shù)據(jù)量過大不好處理了)枯跑,這里使用的Python寫一個(gè)腳本惨驶。

基本邏輯:

讀取文件

建立一個(gè)字典,如果key不在字典中全肮,新增key和value敞咧,如果key在字典中,追加value辜腺。

輸出

#!/usr/bin/python3importsysmydict = {}forfileinsys.argv[1:]:forlineinopen(file,'r'):? ? ? ? key,value = line.strip().split('\t')ifkeyinmydict:? ? ? ? ? ? mydict[key] = mydict[key] +'\t'+ valueelse:? ? ? ? ? ? mydict[key] = valueforkey,valueinmydict.items():? ? print(key +'\t'+ value +'\n')

這幾行代碼寫了2個(gè)番茄鐘休建,但是debug花了我一個(gè)番茄鐘。問題出在str和list兩種數(shù)據(jù)格式的混亂使用评疗。還有一個(gè)bug: 由于詞典是無序的测砂,所以原本代表樣本來源的第一行,會(huì)跑到其他行百匆。

在論壇上找到一個(gè)更加簡潔的代碼(要求基因名順序排列)砌些,用到paste,awk,printf這三個(gè)shell命令。

paste *.txt | awk'{printf $1 "\t";for(i=2;i<=NF;i+=2) printf $i"\t";printf $i}'

保存為countCombiner.py加匈,輸入文件為count, 輸出為標(biāo)準(zhǔn)輸出存璃,需要重定向。

簡單分析

這一步需要用到R語言或者是Excel讀取數(shù)據(jù)雕拼。

1.導(dǎo)入數(shù)據(jù)

options(stringsAsFactors =FALSE)# import data if sample are smallcontrol <- read.table("F:/Data/RNA-Seq/matrix/SRR3589956.count",? ? ? ? ? ? ? ? ? ? ? sep="\t", col.names = c("gene_id","control"))rep1 <- read.table("F:/Data/RNA-Seq/matrix/SRR3589957.count",? ? ? ? ? ? ? ? ? ? sep="\t", col.names = c("gene_id","rep1"))rep2 <- read.table("F:/Data/RNA-Seq/matrix/SRR3589958.count",? ? ? ? ? ? ? ? ? ? sep="\t",col.names = c("gene_id","rep2"))

2.數(shù)據(jù)整合纵东。gencode的注釋文件中的gene_id(如ENSG00000105298.13_3)在EBI是不能搜索到的,所以我就只保留ENSG00000105298這部分啥寇。

# merge data and delete the unuseful rowraw_count <- merge(merge(control, rep1, by="gene_id"), rep2, by="gene_id")raw_count_filt <- raw_count[-1:-5,]ENSEMBL <- gsub("(.*?)\\.\\d*?_\\d","\\1", raw_count_filt$gene_id)row.names(raw_count_filt) <- ENSEMBL

3.總體情況, 大部分基因都為0偎球,所以可以刪掉節(jié)省體積洒扎。

summary(raw_count_filt)controlrep1rep2Min.? :? ? 0.0Min.? :? ? 0.0Min.? :? ? 0.01stQu.:? ? 0.01stQu.:? ? 0.01stQu.:? ? 0.0Median:? ? 0.0Median:? ? 0.0Median:? ? 0.0Mean:? 356.1Mean:? 370.3Mean:? 316.63rdQu.:? ? 15.03rdQu.:? ? 15.03rdQu.:? ? 10.0Max.:161867.0Max.:121902.0Max.:105565.0

4.看幾個(gè)具體基因

在EBI上搜索GAPDH找到ID為ENSG00000111640。

GAPDH<-raw_count_filt[rownames(raw_count_filt)=="ENSG00000111640",]gene_idcontrolrep1rep2ENSG00000111640ENSG00000111640.14_241857 53902 55302

文章研究的AKAP95(ENSG00000105127)的表達(dá)量在KD中都降低了

> AKAP95<-raw_count_filt[rownames(raw_count_filt)=="ENSG00000105127",]>AKAP95? ? ? ? ? ? ? ? ? ? ? ? ? ? gene_id control rep1 rep2ENSG00000105127 ENSG00000105127.8_2? ? 1168? 539? 506

下面的差異基因表達(dá)衰絮,讓我想想袍冷,該如何收拾Jimmy挖的坑。

參考文獻(xiàn)

[1] Gaining comprehensive biological insight into the transcriptome by performing a broad-spectrum RNA-seq analysis

[2] Detecting differential usage of exons from RNA-seq data

[3] RNA-seq Data Analysis-A Practical Approach(2015)

作者:hoptop

鏈接:http://www.reibang.com/p/e9742bbf83b9

來源:簡書

簡書著作權(quán)歸作者所有猫牡,任何形式的轉(zhuǎn)載都請聯(lián)系作者獲得授權(quán)并注明出處胡诗。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市镊掖,隨后出現(xiàn)的幾起案子乃戈,更是在濱河造成了極大的恐慌褂痰,老刑警劉巖亩进,帶你破解...
    沈念sama閱讀 206,723評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異缩歪,居然都是意外死亡归薛,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,485評論 2 382
  • 文/潘曉璐 我一進(jìn)店門匪蝙,熙熙樓的掌柜王于貴愁眉苦臉地迎上來主籍,“玉大人,你說我怎么就攤上這事逛球∏г” “怎么了?”我有些...
    開封第一講書人閱讀 152,998評論 0 344
  • 文/不壞的土叔 我叫張陵颤绕,是天一觀的道長幸海。 經(jīng)常有香客問我,道長奥务,這世上最難降的妖魔是什么物独? 我笑而不...
    開封第一講書人閱讀 55,323評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮氯葬,結(jié)果婚禮上挡篓,老公的妹妹穿的比我還像新娘。我一直安慰自己帚称,他們只是感情好官研,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,355評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著闯睹,像睡著了一般戏羽。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上瞻坝,一...
    開封第一講書人閱讀 49,079評論 1 285
  • 那天蛛壳,我揣著相機(jī)與錄音杏瞻,去河邊找鬼。 笑死衙荐,一個(gè)胖子當(dāng)著我的面吹牛捞挥,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播忧吟,決...
    沈念sama閱讀 38,389評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼砌函,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了溜族?” 一聲冷哼從身側(cè)響起讹俊,我...
    開封第一講書人閱讀 37,019評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎煌抒,沒想到半個(gè)月后仍劈,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,519評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡寡壮,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,971評論 2 325
  • 正文 我和宋清朗相戀三年贩疙,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片况既。...
    茶點(diǎn)故事閱讀 38,100評論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡这溅,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出棒仍,到底是詐尸還是另有隱情悲靴,我是刑警寧澤,帶...
    沈念sama閱讀 33,738評論 4 324
  • 正文 年R本政府宣布莫其,位于F島的核電站癞尚,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏榜配。R本人自食惡果不足惜否纬,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,293評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望蛋褥。 院中可真熱鬧临燃,春花似錦、人聲如沸烙心。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,289評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽淫茵。三九已至爪瓜,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間匙瘪,已是汗流浹背铆铆。 一陣腳步聲響...
    開封第一講書人閱讀 31,517評論 1 262
  • 我被黑心中介騙來泰國打工蝶缀, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人薄货。 一個(gè)月前我還...
    沈念sama閱讀 45,547評論 2 354
  • 正文 我出身青樓翁都,卻偏偏與公主長得像,于是被迫代替她去往敵國和親谅猾。 傳聞我的和親對象是個(gè)殘疾皇子柄慰,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,834評論 2 345

推薦閱讀更多精彩內(nèi)容