qc-數(shù)據(jù)下載與格式轉(zhuǎn)換

在進(jìn)行上游分析之前悬垃,我們需要進(jìn)行原始數(shù)據(jù)的獲取美莫,其中就包括去各大數(shù)據(jù)庫下載原始數(shù)據(jù)

1. 原始數(shù)據(jù)的下載

  • wget
# 根據(jù)數(shù)據(jù)鏈接直接下載
wget https://sra-pub-run-odp.s3.amazonaws.com/sra/SRR19187641/SRR19187641
# 可以根據(jù)鏈接進(jìn)行批量下載
wget -i sra.txt

批量生成數(shù)據(jù)鏈接再下載

  • prefetch
# 更高效危纫、更快捷地下載
prefetch SRR19187641
prefetch --option-file sra.txt -O output_directory

prefetch命令下載SRA文件
SRA Toolkit - prefetch 快速下載NCBI SRA數(shù)據(jù)
sratoolkits軟件的安裝 cdb-config:command not found 解決方法 - 美洲豹2018 - 博客園

  • Aspera

下載ENA數(shù)據(jù)庫當(dāng)中的原始數(shù)據(jù)而克,強(qiáng)烈推薦Aspera這個(gè)軟件

使用ebi數(shù)據(jù)庫直接下載fastq測(cè)序數(shù)據(jù)的改進(jìn)腳本 | 生信菜鳥團(tuán)
Aspera下載安裝使用
從NCBI-SRA和EBI-ENA數(shù)據(jù)庫下載數(shù)據(jù)
2021-02-14 ascp下載ENA數(shù)據(jù)庫文件
How to Download Data Files — ENA Training Modules 1 documentation (ena-docs.readthedocs.io)

2. 格式轉(zhuǎn)換(sra轉(zhuǎn)為fastq)

fastq-dump正在被淘汰溢吻,推薦使用fasterq-dump维费,如果多線程處理推薦使用pfastq-dump,但是都需要先配置好sratoolkit

sra轉(zhuǎn)fastq筆記(fastq-dump促王、fasterq-dump和parallel-fastq-dump)
HowTo: fasterq dump · ncbi/sra-tools Wiki · GitHub
[工具] pfastq-dump 并行版的fastq-dump

# 批量處理方法一
for i in $(ls rawdata/SRR*)
do
    fastq-dump --split-files --gzip ${i##*/} -O rawdata/
done

# 批量處理方法二
cd rawdata/
for base in SRR*
do
    echo $base
    fastq-dump --split-files ${base}
done
cd ../

linux shell獲取文件名和路徑犀盟,basename/dirname/${}運(yùn)用_ksj367043706的博客-CSDN博客_shell 文件名稱

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市蝇狼,隨后出現(xiàn)的幾起案子阅畴,更是在濱河造成了極大的恐慌,老刑警劉巖迅耘,帶你破解...
    沈念sama閱讀 206,126評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件贱枣,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡颤专,警方通過查閱死者的電腦和手機(jī)纽哥,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來栖秕,“玉大人昵仅,你說我怎么就攤上這事±勰В” “怎么了摔笤?”我有些...
    開封第一講書人閱讀 152,445評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵,是天一觀的道長垦写。 經(jīng)常有香客問我吕世,道長,這世上最難降的妖魔是什么梯投? 我笑而不...
    開封第一講書人閱讀 55,185評(píng)論 1 278
  • 正文 為了忘掉前任命辖,我火速辦了婚禮况毅,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘尔艇。我一直安慰自己尔许,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,178評(píng)論 5 371
  • 文/花漫 我一把揭開白布终娃。 她就那樣靜靜地躺著味廊,像睡著了一般。 火紅的嫁衣襯著肌膚如雪棠耕。 梳的紋絲不亂的頭發(fā)上余佛,一...
    開封第一講書人閱讀 48,970評(píng)論 1 284
  • 那天,我揣著相機(jī)與錄音窍荧,去河邊找鬼辉巡。 笑死,一個(gè)胖子當(dāng)著我的面吹牛蕊退,可吹牛的內(nèi)容都是我干的郊楣。 我是一名探鬼主播,決...
    沈念sama閱讀 38,276評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼瓤荔,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼净蚤!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起茉贡,我...
    開封第一講書人閱讀 36,927評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎者铜,沒想到半個(gè)月后腔丧,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,400評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡作烟,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,883評(píng)論 2 323
  • 正文 我和宋清朗相戀三年愉粤,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片拿撩。...
    茶點(diǎn)故事閱讀 37,997評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡衣厘,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出压恒,到底是詐尸還是另有隱情影暴,我是刑警寧澤,帶...
    沈念sama閱讀 33,646評(píng)論 4 322
  • 正文 年R本政府宣布探赫,位于F島的核電站型宙,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏伦吠。R本人自食惡果不足惜妆兑,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,213評(píng)論 3 307
  • 文/蒙蒙 一魂拦、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧搁嗓,春花似錦芯勘、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至屉来,卻和暖如春路翻,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背茄靠。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評(píng)論 1 260
  • 我被黑心中介騙來泰國打工茂契, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留哪自,地道東北人惭等。 一個(gè)月前我還...
    沈念sama閱讀 45,423評(píng)論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像糙及,于是被迫代替她去往敵國和親脐雪。 傳聞我的和親對(duì)象是個(gè)殘疾皇子厌小,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,722評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容