前端大文件分片上傳解決方案窗市,tornado+python+javascript

所用技術(shù)棧

  • JavaScript
  • python
  • tornado
  • madtornado

該文所用到的一切資源

注意事項(xiàng)

  • 本文封裝的upload.js沒有完全耦合后端的madtornado進(jìn)行實(shí)現(xiàn)猖毫,但是結(jié)合madtornado接口方案可以更加便利完成分片上傳任務(wù)
  • 本文后端使用的python+tornado的結(jié)合,但是tornado并非原生tornado而是被封裝后的madtornado释簿,madtornado讓tornado使用起來更加簡(jiǎn)單蕉斜,但是使用者需要有tornado使用經(jīng)驗(yàn),并結(jié)合madtornado文檔才能充分使用

前端實(shí)現(xiàn)

upload.js接口說明

  • ffeach() 創(chuàng)建FileForeach對(duì)象工廠函數(shù)
    參數(shù): file(必填) File對(duì)象
    參數(shù): chunkSize(選填) 單個(gè)文件塊大小怕膛,單位bytes

  • new FileForeach() 文件分塊函數(shù)熟嫩,主要用于文件提取分割后的數(shù)據(jù)塊
    參數(shù): file(必填) File對(duì)象
    參數(shù): chunkSize(選填) 單個(gè)文件塊大小,單位bytes

  • FileForeach#isOutRange() 判斷文件是否超出可提取的大小

  • FileForeach#nextLoad() 獲取下一個(gè)文件塊褐捻,返回Blob對(duì)象

  • FileForeach#forEach() 遍歷File對(duì)象切割的文件塊
    參數(shù): callback(必填) 回調(diào)函數(shù)掸茅,接收一個(gè)blob對(duì)象為文件數(shù)據(jù)塊

注意:當(dāng)數(shù)據(jù)塊被遍歷完畢后,將無法再產(chǎn)出文件塊柠逞,F(xiàn)ileForeach不保存任何數(shù)據(jù)塊昧狮,為了節(jié)省空間
如果需要二次遍歷,需要重新創(chuàng)建FileForeach對(duì)象

  • hashFile() 對(duì)文件進(jìn)行hash運(yùn)算板壮,該方法異步執(zhí)行
    參數(shù): file(必填) File對(duì)象
    參數(shù): callback(選填) 接收運(yùn)算完的hash結(jié)果值函數(shù)
    參數(shù): chunkSize(選填) 單個(gè)文件塊大小逗鸣,單位bytes

  • hashFilePromise() 對(duì)文件進(jìn)行hash運(yùn)算,該方法異步執(zhí)行绰精,并且會(huì)返回Promise對(duì)象
    參數(shù): file(必填) File對(duì)象
    參數(shù): chunkSize(選填) 單個(gè)文件塊大小撒璧,單位bytes

  • fetchFile() 上傳文件塊
    參數(shù): address(必填) URL請(qǐng)求地址
    參數(shù): md5(必填) 文件md5值
    參數(shù): block(必填) 當(dāng)前文件塊的索引
    參數(shù): data(必填) 文件塊數(shù)據(jù)

upload.js前端使用案例

  let fileEl = document.getElementById("file");
    let uploadAddress = "http://127.0.0.1:8095/file/upload";
    let mergeAddress = "http://127.0.0.1:8095/file/merge";

    // 點(diǎn)擊上傳按鈕時(shí)行為反應(yīng)
    function upload() {
        let file = fileEl.files[0];
        if (file) {
            let fileMD5;

            // 利用時(shí)間換空間對(duì)文件首次進(jìn)行md5計(jì)算校驗(yàn)
            hashFilePromise(file).then(md5 => {
                let fetchList = [];
                fileMD5 = md5;

                // 遍歷文件切片生成fetch請(qǐng)求對(duì)象
                ffeach(file).forEach(function (index, data) {
                    fetchList.push(fetchFile(uploadAddress, md5, index, data));
                });

                return Promise.all(fetchList);
            }).then(function (result) {
                // 當(dāng)所有數(shù)據(jù)片傳輸完畢后,執(zhí)行的內(nèi)容
                const params = new URLSearchParams();
                params.append('md5', fileMD5);
                params.append('suffix', "png");

                return fetch(mergeAddress, {
                    method: "POST",
                    body: params,
                }).then(response => {
                    if (response.ok) {
                        return response.json();
                    }
                    throw Error("請(qǐng)求失敗");
                });
            }).then(result => {
                // 當(dāng)碎片合并后返回信息
                console.log(result);
            });

            // 清空input type=file中的文件內(nèi)容
            fileEl.value = null;
        } else {
            alert("請(qǐng)選擇文件");
        }
    }

后端實(shí)現(xiàn)

參考madtornado文檔說明

其它MVC模式開發(fā)tornado

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末茬底,一起剝皮案震驚了整個(gè)濱河市沪悲,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌阱表,老刑警劉巖殿如,帶你破解...
    沈念sama閱讀 219,427評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異最爬,居然都是意外死亡涉馁,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,551評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門爱致,熙熙樓的掌柜王于貴愁眉苦臉地迎上來烤送,“玉大人,你說我怎么就攤上這事糠悯“锛幔” “怎么了?”我有些...
    開封第一講書人閱讀 165,747評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵互艾,是天一觀的道長(zhǎng)试和。 經(jīng)常有香客問我,道長(zhǎng)纫普,這世上最難降的妖魔是什么阅悍? 我笑而不...
    開封第一講書人閱讀 58,939評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上节视,老公的妹妹穿的比我還像新娘拳锚。我一直安慰自己,他們只是感情好寻行,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,955評(píng)論 6 392
  • 文/花漫 我一把揭開白布霍掺。 她就那樣靜靜地躺著,像睡著了一般寡痰。 火紅的嫁衣襯著肌膚如雪抗楔。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,737評(píng)論 1 305
  • 那天拦坠,我揣著相機(jī)與錄音连躏,去河邊找鬼。 笑死贞滨,一個(gè)胖子當(dāng)著我的面吹牛入热,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播晓铆,決...
    沈念sama閱讀 40,448評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼勺良,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了骄噪?” 一聲冷哼從身側(cè)響起尚困,我...
    開封第一講書人閱讀 39,352評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎链蕊,沒想到半個(gè)月后事甜,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,834評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡滔韵,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,992評(píng)論 3 338
  • 正文 我和宋清朗相戀三年逻谦,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片陪蜻。...
    茶點(diǎn)故事閱讀 40,133評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡邦马,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出宴卖,到底是詐尸還是另有隱情滋将,我是刑警寧澤,帶...
    沈念sama閱讀 35,815評(píng)論 5 346
  • 正文 年R本政府宣布症昏,位于F島的核電站耕渴,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏齿兔。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,477評(píng)論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望分苇。 院中可真熱鬧添诉,春花似錦、人聲如沸医寿。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,022評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽靖秩。三九已至须眷,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間沟突,已是汗流浹背花颗。 一陣腳步聲響...
    開封第一講書人閱讀 33,147評(píng)論 1 272
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留惠拭,地道東北人扩劝。 一個(gè)月前我還...
    沈念sama閱讀 48,398評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像职辅,于是被迫代替她去往敵國(guó)和親棒呛。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,077評(píng)論 2 355