cellranger實戰(zhàn)2:非正常數(shù)據(jù)之僅有bam文件

我所理解的cellranger軟件理想原始輸入數(shù)據(jù)就是SRA格式适瓦,然后利用sra-tools分為read谱仪、barcode+UMI、index三個fastq.gz文件嗦随。最后直接利用cellranger即可敬尺。但總會發(fā)現(xiàn)文獻提供的數(shù)據(jù)格式并非如此,就要花費一些心思了署恍。

如圖盯质,基本了解到做了三組實驗袭蝗,每組兩個重復。但關鍵作者提供的是bam文件格式朵逝,就要想辦法轉(zhuǎn)換為cellranger所需要的文件格式乡范。

1配名、下載數(shù)據(jù)

cat > bam.txt
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798249/ICBtreated_Brca2null_rep1.bam
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798250/ICBtreated_Brca1null_rep2.bam
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798251/ICBtreated_Brca1null_rep1.bam
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798257/ICBtreated_Parental_rep2.bam
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798258/ICBtreated_Parental_rep1.bam
fasp.sra.ebi.ac.uk:/vol1/run/SRR117/SRR11798259/ICBtreated_Brca2null_rep2.bam

conda activate download
cat fq.txt |while read id
do ascp -QT -l 300m -P33001  \
-i ~/miniconda3/envs/download/etc/asperaweb_id_dsa.openssh \
era-fasp@$id  .
done
conda deactivate 
rawdata

conda環(huán)境配置可見實戰(zhàn)1芋膘,就是使用下ascp軟件

2、bam轉(zhuǎn)fastq

2.1 special bam of cellranger

samtools view ICBtreated_Parental_rep1.bam | less -SN
samtools view ICBtreated_Parental_rep1.bam | head -3 | tr "\t" "\n" | cat -n
bam tag

相關標簽具體解釋見結尾鸯匹,這里知道 CB或者CR代表barcode、UB或者UR代表UMI即可幼东。

2.2 cellranger bamtofastq

  • 知道上述知識點后科雳,我一開始想手動提取下bam文件里的barcode與UMI序列,也查了很多l(xiāng)inux字符處理方法简逮。但這樣之后還要自己組裝fastq尿赚,并且使header一致”辏總之很費事冰寻。
  • 后來知道 cellranger也有bamtofastq功能,就試試看和其它軟件的轉(zhuǎn)換有什么不同轻腺。
  • 如下圖是一個bam文件的處理結果划乖。其很強大的功能:自動根據(jù)bam文件,生成配套的三種文件误算。而且還修改為規(guī)范命名!I1,R1,R2的含義見實戰(zhàn)1
    ICBtreated_Brca1null_rep1.bam
three type fastq

I1代表的index序列筒占,一般是用于區(qū)分混合樣品的蜘犁,二代測序通配这橙。這里為空导披,表示bam文件里沒有。而且的確也不需要鹰晨,就提供一個空序列文件即可止毕。

  • 批量處理
cat > bamtofastq.sh
bin=/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger
cat name.list |while read id
do
$bin bamtofastq $id ./fastq/${id}
done

bash bamtofastq.sh

3、cellranger count

  • 經(jīng)過上一步的處理忍疾,接下來就比較簡單了谨朝。
find /home/shensuo/test/fastq/ | grep bam/out | grep -v XX/bam > fq.txt

bin=/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger
db=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/
target=bamtofastq

cat fq.txt |while read id
do
echo $bin count --id=${id:0-39:14} \
--localcores=4 \
--transcriptome=$db \
--fastqs=$id \
--sample=$target \
--expect-cells=3000 \
--nosecondary  
done

cat > cellranger.sh
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Brca1null_rep1 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Brca1null_rep1.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=13009 --nosecondary
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Brca1null_rep2 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Brca1null_rep2.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=21789 --nosecondary
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Brca2null_rep1 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Brca2null_rep1.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=18684 --nosecondary
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Brca2null_rep2 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Brca2null_rep2.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=16731 --nosecondary
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Parental_rep1 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Parental_rep1.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=13292 --nosecondary
/home/shensuo/biosoft/cellranger/cellranger-4.0.0/bin/cellranger count --id=ICBtreated_Parental_rep2 --localcores=10 --transcriptome=/home/shensuo/biosoft/cellranger/test/refdata-gex-mm10-2020-A/ --fastqs=/home/shensuo/test/fastq/ICBtreated_Parental_rep2.bam/output_0_1_HG3HHDRXX --sample=bamtofastq --expect-cells=20718 --nosecondary

nohup  bash /home/shensuo/test/cr_out/fq.txt &
#需要使用全路徑

耐心等待結果即可字币。估計一夜肯定是需要的。
此外其中有幾個注意點士复,具體如下

  • 一開始想只用while語句運行共苛,發(fā)現(xiàn)還是不能盡善盡美。就echo下澄峰,再根據(jù)實際情況修改辟犀,保存為cellranger.sh
  • 關于--localcores=設置绸硕,可根據(jù)實際情況玻佩。我是設置10席楚,之后也單獨嘗試了32,24烦秩,20。結果還是24還比較適合目前得到服務器環(huán)境的最大承受兜蠕,如果想盡快跑完的話抛寝。
  • 關于--expect-cells設置,主要參考原文獻的測序結果細胞數(shù)盗舰。
    paper result

4岭皂、導出最終結果

  • 如前所述,cellranger count結果很多书劝,主要是需要其中如下圖的三個文件(每個樣品)


    three type result
cat name.list | while read id
do 
mkdir ./out/$id
cp $id/outs/filtered_feature_bc_matrix/* ./out/$id
done

接下來就可以购对,將數(shù)據(jù)導入到R中陶因,用seurat等包進行下游分析了。

附:cellranger indexed bam

https://support.10xgenomics.com/single-cell-gene-expression/software/pipelines/latest/output/bam

image.png

如官網(wǎng)介紹解幽,Chromium cellular and molecular barcode information for each read is stored as TAG fields in this bam(produced by cellranger)
cellular and molecular barcode分別對應我們之前說的barcode與UMI序列.前者用來區(qū)分不同GEMs躲株,也就是對細胞做了一個標記镣衡;后者用于表示基因文庫大小档悠,即每種mRNA一個特定的UMI望浩。
如圖介紹磨德,介紹

  • CBCR切诀、CY表示barcode搔弄,一般是16個堿基顾犹;
  • UB褒墨、URUY表示UMI浑玛,一般是10個堿基噩咪。
  • R一般代表原始測序數(shù)據(jù),Y代表質(zhì)量分數(shù)涨享,而B代表校正后的R仆百,可能對應堿基質(zhì)量分數(shù)太低等因素。一般來說RB都是相同的吁讨。
最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末建丧,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子茶鹃,更是在濱河造成了極大的恐慌,老刑警劉巖闭翩,帶你破解...
    沈念sama閱讀 206,013評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件疗韵,死亡現(xiàn)場離奇詭異,居然都是意外死亡流译,警方通過查閱死者的電腦和手機者疤,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,205評論 2 382
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來革砸,“玉大人糯累,你說我怎么就攤上這事⌒茫” “怎么了胖秒?”我有些...
    開封第一講書人閱讀 152,370評論 0 342
  • 文/不壞的土叔 我叫張陵阎肝,是天一觀的道長较锡。 經(jīng)常有香客問我,道長盗痒,這世上最難降的妖魔是什么蚂蕴? 我笑而不...
    開封第一講書人閱讀 55,168評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮俯邓,結果婚禮上骡楼,老公的妹妹穿的比我還像新娘。我一直安慰自己稽鞭,他們只是感情好鸟整,可當我...
    茶點故事閱讀 64,153評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著朦蕴,像睡著了一般篮条。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上赴恨,一...
    開封第一講書人閱讀 48,954評論 1 283
  • 那天,我揣著相機與錄音钳垮,去河邊找鬼饺窿。 笑死,一個胖子當著我的面吹牛倚舀,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播糠排,決...
    沈念sama閱讀 38,271評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼乾闰!你這毒婦竟也來了涯肩?” 一聲冷哼從身側響起病苗,我...
    開封第一講書人閱讀 36,916評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎咬展,沒想到半個月后破婆,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體荠割,經(jīng)...
    沈念sama閱讀 43,382評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡夺克,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,877評論 2 323
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了狡门。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 37,989評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡叛复,死狀恐怖褐奥,靈堂內(nèi)的尸體忽然破棺而出撬码,到底是詐尸還是另有隱情,我是刑警寧澤彻犁,帶...
    沈念sama閱讀 33,624評論 4 322
  • 正文 年R本政府宣布曹抬,位于F島的核電站谤民,受9級特大地震影響触创,放射性物質(zhì)發(fā)生泄漏哼绑。R本人自食惡果不足惜抖韩,卻給世界環(huán)境...
    茶點故事閱讀 39,209評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望席揽。 院中可真熱鬧,春花似錦竟稳、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,199評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至混聊,卻和暖如春句喜,著一層夾襖步出監(jiān)牢的瞬間咳胃,已是汗流浹背展懈。 一陣腳步聲響...
    開封第一講書人閱讀 31,418評論 1 260
  • 我被黑心中介騙來泰國打工冻记, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留檩赢,地道東北人贞瞒。 一個月前我還...
    沈念sama閱讀 45,401評論 2 352
  • 正文 我出身青樓军浆,卻偏偏與公主長得像乒融,于是被迫代替她去往敵國和親赞季。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,700評論 2 345

推薦閱讀更多精彩內(nèi)容