使用Aspera高速下載ENA/SRA測(cè)序數(shù)據(jù)

  • 批量下載EBI數(shù)據(jù)

1痪署、獲取ascp下載地址

EBI網(wǎng)站首頁(yè)輸入檢索號(hào)典奉,分別選擇顯示條目sample name和FASTQ files (Aspera),點(diǎn)擊 TEXT 進(jìn)行下載腥例,生成文件: sample_alias.txt和fastq_aspera.txt

[EBI網(wǎng)址]https://www.ebi.ac.uk/ena/data/view/PRJEB7888

2干跛、下載測(cè)序數(shù)據(jù)

cat fastq_aspera.txt | sed '1d' | sed 's/fasp.sra.ebi.ac.uk://g' | sed 's/;/\n/g' > sample_fastq.txt
nohup /export/home/hushy/.aspera/connect/bin/ascp -i /export/home/hushy/.aspera/connect/etc/asperaweb_id_dsa.openssh -k1 -Tr -l100m -P33001 --mode recv --host fasp.sra.ebi.ac.uk --user era-fasp --file-list sample_fastq.txt . &
# .表示輸出到當(dāng)前路徑子姜,也可以指定為其他路徑 

3、將樣本名稱和數(shù)據(jù)路徑合并成一個(gè)文件

cat sample_alias.txt | sed '1d' > sample_name.txt 
find /data/hushy/study03/* -name "*fastq.gz" | tee sample_data.txt | cut -d '/' -f 5 - | cut -d '_' -f 1 - | paste - sample_data.txt | awk '{a[$1]=a[$1]$2" "}END{for(i in a){print i,a[i]}}' | awk 'FNR==NR{a[NR]=$1;next}{$1=a[FNR]}1' sample_name.txt - | sed 's/ /\t/g' > study03_sample_list.txt
  • 分批下載EBI數(shù)據(jù)

1楼入、獲取下載地址

EBI搜索PRJEB ID哥捕,單擊樣本的右鍵,復(fù)制鏈接嘉熊,如:
fasp.sra.ebi.ac.uk:/vol1/fastq/ERR221/002/ERR2216042/ERR2216042_1.fastq.gz

2遥赚、下載數(shù)據(jù)

/export/home/hushy/.aspera/connect/bin/ascp -i /export/home/hushy/.aspera/connect/etc/asperaweb_id_dsa.openssh -k1 -Tr -l100m -P33001 era-fasp@fasp.sra.ebi.ac.uk:/vol1/fastq/ERR221/002/ERR2216042/ERR2216042_1.fastq.gz .
# ENA在Aspera的用戶名是era-fasp,ENA數(shù)據(jù)庫(kù)的數(shù)據(jù)存放位置是fasp.sra.ebi.ac.uk记舆,命令末尾的空格和.符號(hào)不可省略
  • 分批下載NCBI數(shù)據(jù)

1鸽捻、獲取下載地址

ftp.ncbi.nlm.nih.gov:/sra/sra-instant/reads/ByRun/sra/SRR/SRR699/SRR6994553/SRR6994553.sra

2、下載數(shù)據(jù)

/export/home/hushy/.aspera/connect/bin/ascp -i /export/home/hushy/.aspera/connect/etc/asperaweb_id_dsa.openssh -k1 -Tr -l100m anonftp@ftp.ncbi.nlm.nih.gov:/sra/sra-instant/reads/ByRun/sra/SRR/SRR699/SRR6994553/SRR6994553.sra

3泽腮、使用sratoolkit將.sra文件轉(zhuǎn)換成.fastq.gz文件

/share/apps/sratoolkit.2.9.6-1-centos_linux64/bin/fastq-dump --split-3 SRR6994553.sra
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末御蒲,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子诊赊,更是在濱河造成了極大的恐慌厚满,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,539評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件碧磅,死亡現(xiàn)場(chǎng)離奇詭異碘箍,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)鲸郊,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,594評(píng)論 3 396
  • 文/潘曉璐 我一進(jìn)店門丰榴,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人秆撮,你說(shuō)我怎么就攤上這事四濒。” “怎么了?”我有些...
    開封第一講書人閱讀 165,871評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵盗蟆,是天一觀的道長(zhǎng)戈二。 經(jīng)常有香客問(wèn)我,道長(zhǎng)喳资,這世上最難降的妖魔是什么觉吭? 我笑而不...
    開封第一講書人閱讀 58,963評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮仆邓,結(jié)果婚禮上鲜滩,老公的妹妹穿的比我還像新娘。我一直安慰自己宏赘,他們只是感情好绒北,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,984評(píng)論 6 393
  • 文/花漫 我一把揭開白布黎侈。 她就那樣靜靜地躺著察署,像睡著了一般。 火紅的嫁衣襯著肌膚如雪峻汉。 梳的紋絲不亂的頭發(fā)上贴汪,一...
    開封第一講書人閱讀 51,763評(píng)論 1 307
  • 那天,我揣著相機(jī)與錄音休吠,去河邊找鬼扳埂。 笑死,一個(gè)胖子當(dāng)著我的面吹牛瘤礁,可吹牛的內(nèi)容都是我干的阳懂。 我是一名探鬼主播,決...
    沈念sama閱讀 40,468評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼柜思,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼岩调!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起赡盘,我...
    開封第一講書人閱讀 39,357評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤号枕,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后陨享,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體葱淳,經(jīng)...
    沈念sama閱讀 45,850評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,002評(píng)論 3 338
  • 正文 我和宋清朗相戀三年抛姑,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了赞厕。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,144評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡定硝,死狀恐怖皿桑,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤唁毒,帶...
    沈念sama閱讀 35,823評(píng)論 5 346
  • 正文 年R本政府宣布蒜茴,位于F島的核電站,受9級(jí)特大地震影響浆西,放射性物質(zhì)發(fā)生泄漏粉私。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,483評(píng)論 3 331
  • 文/蒙蒙 一近零、第九天 我趴在偏房一處隱蔽的房頂上張望诺核。 院中可真熱鬧,春花似錦久信、人聲如沸窖杀。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,026評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)入客。三九已至,卻和暖如春腿椎,著一層夾襖步出監(jiān)牢的瞬間桌硫,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,150評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工啃炸, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留铆隘,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,415評(píng)論 3 373
  • 正文 我出身青樓南用,卻偏偏與公主長(zhǎng)得像膀钠,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子裹虫,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,092評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容