Aspera數(shù)據(jù)下載快速應(yīng)用

所以秋天要泡澡啊独榴!

本來下載數(shù)據(jù)用的是NCBI官方指定的sratool-kit里面帶的prefetch僧叉,本來實驗室網(wǎng)速快還沒啥問題,但是這次碰到了一個硬茬括眠,壓縮后數(shù)據(jù)15G彪标,下載數(shù)次中斷,后來轉(zhuǎn)為使用aspera進行下載掷豺,快速入手記錄捞烟。

該教程基于Linux環(huán)境

安裝

conda熟練手都懂的
conda install -c hcc aspera-cli

配置參數(shù)

-v verbose mode 嘮叨模式,能讓你實時知道程序在干啥当船,方便查錯题画。有些作者的程序缺乏人性化,運行之后德频,只見光標(biāo)閃苍息,壓根不知道運行到哪了
-T 取消加密,否則有時候數(shù)據(jù)下載不了
-i 提供私鑰文件的地址,我也不知道干嘛的竞思,反正不能少表谊,地址一般是~/.aspera/connect/etc中的asperaweb_id_dsa.openssh文件
-l 設(shè)置最大傳輸速度,一般200m到500m盖喷,如果不設(shè)置爆办,反而速度會比較低,可能有個較低的默認(rèn)值
-k 斷點續(xù)傳课梳,一般設(shè)置為值1
-Q 不懂距辆,一般加上它
-P 提供SSH port,一般是33001暮刃,反正我不懂

參考:https://blog.csdn.net/herokoking/article/details/78890567

簡單使用

NOTE !

洲更給了額外信息诸蚕,當(dāng)安裝了aspera以后,prefetch會優(yōu)先調(diào)用aspera灾搏,下載代碼為:

prefetch SRR653396
# 會報錯

2018-11-08 更新挫望,prefetch下載方式從prefetch SRR653396更新為prefetch --ascp-path '$HOME/.aspera/connect/bin/ascp|$HOME/.aspera/connect/etc/asperaweb_id_dsa.openssh' SRR653396,不然會報錯:

2018-11-08T12:34:14 prefetch.2.8.1: 1) Downloading 'SRR653396'...
2018-11-08T12:34:14 prefetch.2.8.1:  Downloading via fasp...
2018-11-08T12:34:15 prefetch.2.8.1 err: process failed while waiting process - ascp failed with 1
2018-11-08T12:34:16 prefetch.2.8.1 err: process failed while waiting process - ascp failed with 1
2018-11-08T12:34:16 prefetch.2.8.1:  fasp download failed
2018-11-08T12:34:16 prefetch.2.8.1: 1) failed to download SRR653396
  • ENA 下載數(shù)據(jù)

    • 一樣的步驟狂窑,不過是去ENA直接搜索,復(fù)制fastq.gz文件的地址桑腮,進行依葫蘆畫瓢式的替換后進行下載

    • 成型下載代碼為:

      ascp -v -k 1 -T -l 200m -P 33001 -i ~/biosoft/anaconda/etc/asperaweb_id_dsa.openssh era-fasp@fasp.sra.ebi.ac.uk:/vol1/fastq/SRR949/SRR949627/SRR949627_1.fastq.gz ./
      

結(jié)語

透泉哈,下載速度是真滴快。

另外破讨,洲更也在簡書以及生信媛公眾號上發(fā)過如何上傳數(shù)據(jù)丛晦,本篇和其組成UP/DOWN LOAD姐妹篇。
文首圖片來自《海街日記》

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末提陶,一起剝皮案震驚了整個濱河市烫沙,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌隙笆,老刑警劉巖锌蓄,帶你破解...
    沈念sama閱讀 206,126評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異撑柔,居然都是意外死亡瘸爽,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評論 2 382
  • 文/潘曉璐 我一進店門铅忿,熙熙樓的掌柜王于貴愁眉苦臉地迎上來剪决,“玉大人,你說我怎么就攤上這事「塘剩” “怎么了享言?”我有些...
    開封第一講書人閱讀 152,445評論 0 341
  • 文/不壞的土叔 我叫張陵,是天一觀的道長渗鬼。 經(jīng)常有香客問我览露,道長,這世上最難降的妖魔是什么乍钻? 我笑而不...
    開封第一講書人閱讀 55,185評論 1 278
  • 正文 為了忘掉前任肛循,我火速辦了婚禮,結(jié)果婚禮上银择,老公的妹妹穿的比我還像新娘多糠。我一直安慰自己,他們只是感情好浩考,可當(dāng)我...
    茶點故事閱讀 64,178評論 5 371
  • 文/花漫 我一把揭開白布夹孔。 她就那樣靜靜地躺著,像睡著了一般析孽。 火紅的嫁衣襯著肌膚如雪搭伤。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 48,970評論 1 284
  • 那天袜瞬,我揣著相機與錄音怜俐,去河邊找鬼。 笑死邓尤,一個胖子當(dāng)著我的面吹牛拍鲤,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播汞扎,決...
    沈念sama閱讀 38,276評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼季稳,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了澈魄?” 一聲冷哼從身側(cè)響起景鼠,我...
    開封第一講書人閱讀 36,927評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎痹扇,沒想到半個月后铛漓,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,400評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡帘营,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,883評論 2 323
  • 正文 我和宋清朗相戀三年票渠,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片芬迄。...
    茶點故事閱讀 37,997評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡问顷,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情杜窄,我是刑警寧澤肠骆,帶...
    沈念sama閱讀 33,646評論 4 322
  • 正文 年R本政府宣布,位于F島的核電站塞耕,受9級特大地震影響蚀腿,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜扫外,卻給世界環(huán)境...
    茶點故事閱讀 39,213評論 3 307
  • 文/蒙蒙 一莉钙、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧筛谚,春花似錦磁玉、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至吮铭,卻和暖如春时迫,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背谓晌。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評論 1 260
  • 我被黑心中介騙來泰國打工掠拳, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人纸肉。 一個月前我還...
    沈念sama閱讀 45,423評論 2 352
  • 正文 我出身青樓碳想,卻偏偏與公主長得像,于是被迫代替她去往敵國和親毁靶。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,722評論 2 345

推薦閱讀更多精彩內(nèi)容