基于Python Hyper實現(xiàn)Http2的multipart/form-data數(shù)據(jù)上傳

Http/2雖然推出已經(jīng)不短了芥颈,但目前整體的使用率并不高,對應的支持庫也并不理想角钩,目前主要的支持庫可以參考:https://github.com/http2/http2-spec/wiki/Implementations

針對也Python吝沫,目前可選的庫好像只有Hyper(http://hyper.readthedocs.io/en/latest/)。Hyper在官網(wǎng)當中聲稱對Requests有很好的支持彤断,可以將Hyper集成到Request中野舶,完成Requests對Http/2的支持易迹,

requests集成hyper

但在實際開發(fā)中并不理想宰衙。比如,默認Request的請求超時時間是無限的睹欲,但通過集成Hyper來使用Requests進行get請求時供炼,還是會出現(xiàn)超時的情況一屋,所以,對于Http/2的開發(fā)袋哼,不建議使用這種方式冀墨。

開發(fā)背景

在開發(fā)“才權的AI小助手”過程中,進行了DuerOS云端接口的接入涛贯,DuerOS的云端接口是基于Http/2的诽嘉,而且,需要使用multipart/form-data進行當前狀態(tài)和語音數(shù)據(jù)流的上傳弟翘。

DuerOS語音狀態(tài)和數(shù)據(jù)上傳格式

http://open.duer.baidu.com/doc/dueros-conversational-service/device-interface/voice-input_markdown

面臨問題和解決方案

Hyper中并沒有專門的接口用來實現(xiàn)multipart/form-data類型數(shù)據(jù)的上傳虫腋,而是直接接收已經(jīng)序列化后的body數(shù)據(jù)。

Hyper數(shù)據(jù)上傳

針對這種情況稀余,我們可以Http協(xié)議的報文定義悦冀,來定制body的內容,最終實現(xiàn)Hyper對multipart/form-data類型數(shù)據(jù)上傳的支持睛琳。

數(shù)據(jù)報文格式

示例代碼

對于DuerOS的語音請求盒蟆,需要講語音狀態(tài)(Json串)和語音數(shù)據(jù)(PCM音頻流)以multipart/form-data的形式進行上傳。這里我們通過get_multipart_formed_data()方法來定制body內容师骗,

'''
    msg_id:消息ID(messageId字段)
    dialog_req_id:對話ID(dialogRequestId字段)
    format:語音數(shù)據(jù)格式(format字段)
    data:語音raw data(pcm數(shù)據(jù)流)
'''
def get_multipart_formed_data(self, msg_id, dialog_req_id, format, data):
    
    event={'clientContext':['ai.dueros.device_interface.alerts.AlertsState','ai.dueros.device_interface.audio_player.PlaybackState','ai.dueros.device_interface.speaker_controller.VolumeState','ai.dueros.device_interface.voice_output.SpeechState'], \
   'event':{'header':{'namespace':'ai.dueros.device_interface.voice_input', \
                      'name':'ListenStarted', \
                      'messageId':msg_id, \
                      'dialogRequestId':dialog_req_id}, \
            'payload':{'format':format}}}
    
    event=json.dumps(event)
    
    post_data1=[]
    
    # ListenStarted事件
    post_data1.append('--'+boundary)
    post_data1.append('Content-Disposition: form-data; name="metadata"')
    post_data1.append('Content-Type: text/plain; charset=utf-8')
    post_data1.append('')
    post_data1.append(event)
#     post_data1.append('--'+boundary+'--')# test
    post_data1.append('')
    
#     return crlf.join(post_data1).encode('utf-8')# test
    
#     # Audio data
    post_data1.append('--'+boundary)
    post_data1.append('Content-Disposition: form-data; name="audio"')
    post_data1.append('Content-Type: application/octet-stream')
    post_data1.append('')
     
    body1=crlf.join(post_data1).encode('utf-8')
     
    body2=data
     
    post_data3=[]
    post_data3.append('--'+boundary+'--')
    post_data3.append('')
    body3=crlf.join(post_data3).encode('utf-8')
     
    upload_data=body1+b'{0}'.format(crlf)+body2+b'{0}'.format(crlf)+body3
     
    return upload_data

語音狀態(tài)和數(shù)據(jù)上傳历等,

'''
    msg_id:消息ID(messageId字段)
    dialog_req_id:對話ID(dialogRequestId字段)
    format:語音數(shù)據(jù)格式(format字段)
    data:語音raw data(pcm數(shù)據(jù)流)
'''
def voice_raw_data_upload(self, msg_id, dialog_req_id, format, data):
    post_body=self.get_multipart_formed_data(msg_id, dialog_req_id, format, data)
    self.conn.request('POST', path_upload_voice_data, headers=self.headers, body=post_body)
    resp = self.conn.get_response()
      
    return resp.read()

完整代碼參考

完整的代碼可以參考
《Eddy的AI小助手-百度DuerOS模塊接入(23)》

博客地址

http://caiquanliu.github.io

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市辟癌,隨后出現(xiàn)的幾起案子募闲,更是在濱河造成了極大的恐慌,老刑警劉巖愿待,帶你破解...
    沈念sama閱讀 219,270評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件浩螺,死亡現(xiàn)場離奇詭異,居然都是意外死亡仍侥,警方通過查閱死者的電腦和手機要出,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,489評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來农渊,“玉大人患蹂,你說我怎么就攤上這事≡椅桑” “怎么了传于?”我有些...
    開封第一講書人閱讀 165,630評論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長醉顽。 經(jīng)常有香客問我沼溜,道長,這世上最難降的妖魔是什么游添? 我笑而不...
    開封第一講書人閱讀 58,906評論 1 295
  • 正文 為了忘掉前任系草,我火速辦了婚禮通熄,結果婚禮上,老公的妹妹穿的比我還像新娘找都。我一直安慰自己唇辨,他們只是感情好,可當我...
    茶點故事閱讀 67,928評論 6 392
  • 文/花漫 我一把揭開白布能耻。 她就那樣靜靜地躺著赏枚,像睡著了一般。 火紅的嫁衣襯著肌膚如雪晓猛。 梳的紋絲不亂的頭發(fā)上嗡贺,一...
    開封第一講書人閱讀 51,718評論 1 305
  • 那天,我揣著相機與錄音鞍帝,去河邊找鬼诫睬。 笑死,一個胖子當著我的面吹牛帕涌,可吹牛的內容都是我干的摄凡。 我是一名探鬼主播,決...
    沈念sama閱讀 40,442評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼蚓曼,長吁一口氣:“原來是場噩夢啊……” “哼亲澡!你這毒婦竟也來了?” 一聲冷哼從身側響起纫版,我...
    開封第一講書人閱讀 39,345評論 0 276
  • 序言:老撾萬榮一對情侶失蹤床绪,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后其弊,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體癞己,經(jīng)...
    沈念sama閱讀 45,802評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,984評論 3 337
  • 正文 我和宋清朗相戀三年梭伐,在試婚紗的時候發(fā)現(xiàn)自己被綠了痹雅。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,117評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡糊识,死狀恐怖绩社,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情赂苗,我是刑警寧澤愉耙,帶...
    沈念sama閱讀 35,810評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站拌滋,受9級特大地震影響朴沿,放射性物質發(fā)生泄漏。R本人自食惡果不足惜鸠真,卻給世界環(huán)境...
    茶點故事閱讀 41,462評論 3 331
  • 文/蒙蒙 一悯仙、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧吠卷,春花似錦锡垄、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,011評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至疾渴,卻和暖如春千贯,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背搞坝。 一陣腳步聲響...
    開封第一講書人閱讀 33,139評論 1 272
  • 我被黑心中介騙來泰國打工搔谴, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人桩撮。 一個月前我還...
    沈念sama閱讀 48,377評論 3 373
  • 正文 我出身青樓敦第,卻偏偏與公主長得像,于是被迫代替她去往敵國和親店量。 傳聞我的和親對象是個殘疾皇子芜果,可洞房花燭夜當晚...
    茶點故事閱讀 45,060評論 2 355

推薦閱讀更多精彩內容