python多進(jìn)程間通信與接口間調(diào)用

最近在寫一個(gè)小機(jī)器人的小項(xiàng)目薇搁,將比較耗時(shí)且繁瑣的任務(wù)交由機(jī)器人處理斋扰,解放出人力資源。
機(jī)器人功能已完成啃洋。但是使用由主系統(tǒng)推送信息传货,到機(jī)器人執(zhí)行完成,再返回主系統(tǒng)結(jié)果宏娄,這樣的單進(jìn)程模式问裕,顯然不合理,于是想到了利用python的多進(jìn)程模式孵坚。

flow.png

多進(jìn)程

多進(jìn)程使用python內(nèi)置的multiprocessing模塊粮宛,它提供了一個(gè)Process類來代表一個(gè)進(jìn)程對(duì)象窥淆。創(chuàng)建子進(jìn)程時(shí),只需要傳入一個(gè)執(zhí)行函數(shù)和函數(shù)的參數(shù)巍杈,用start()方法啟動(dòng)忧饭。主程序和子程序的數(shù)據(jù)通信呢?也很簡單筷畦,在主進(jìn)程中使用put()方法將數(shù)據(jù)傳給子進(jìn)程词裤,在子進(jìn)程中用get()接收數(shù)據(jù)即可。

from multiprocessing import Process,Queue
...
#創(chuàng)建并啟動(dòng)子進(jìn)程
q = Queue()
#主進(jìn)程寫入數(shù)據(jù)
q.put(data)
p = Process(target=sub_proc, args=('這是子進(jìn)程', q))
p.start()
...
#子進(jìn)程內(nèi)接收數(shù)據(jù)
a=q.get()
...

接口調(diào)用

接口開發(fā)使用了flask-restful鳖宾,編寫了兩個(gè)接口:RobotNext,分別注冊(cè)到/v1/subprocess/v1/next吼砂。Robot用于接收主程序消息,Next用來返回機(jī)器人執(zhí)行結(jié)果攘滩。
完整代碼如下:
1.multiprocess.py

# coding:utf-8
# Created by Allen Zhang
# Date: 2017/7/15
import json
from multiprocessing import Process,Queue
import os
from time import sleep
from flask_restful import Api,Resource
from flask import Flask, request
import requests


app = Flask(__name__)
api = Api(app)

#模擬比較耗時(shí)的機(jī)器人程序帅刊,作為子進(jìn)程,由主進(jìn)程調(diào)用
def sub_proc(name,q):
    print('運(yùn)行子進(jìn)程:%s (%s)'%(name,os.getpid()))
    a=q.get()
    print(a)
    sleep(4)
    print('子進(jìn)程結(jié)束')

#子進(jìn)程中的結(jié)果漂问,返回給主程序
@app.route('/',methods=['POST'])
def next_step():
    print('調(diào)用下一個(gè)接口next')
    head = {"Content-Type":"application/json"}

    url ='http://127.0.0.1:8090/v1/next'
    data = json.dumps({'hi':'This is post from another api'})
    resp = requests.post(url,data=data,headers=head)
    print(resp.text)

#定義子進(jìn)程并啟動(dòng)
def run_sub_process(data):
    q = Queue()
    q.put(data)
    p = Process(target=sub_proc, args=('這是子進(jìn)程', q))
    print('子進(jìn)程啟動(dòng)鸠项,余寥,屏鳍,')
    # 啟動(dòng)子進(jìn)程
    p.start()
    next_step()

#機(jī)器人接口吊说,接收主系統(tǒng)推送的信息,信息無誤會(huì)立即啟動(dòng)機(jī)器人磷仰,并即時(shí)返回消息給主系統(tǒng)
class Robot(Resource):
    def post(self):
        data = request.get_data().decode()
        if data:
            run_sub_process(data)
            return 'Run sub process and ok'
        else:
            return 'Falied'


api.add_resource(Robot,'/v1/subprocess')


if __name__ == '__main__':
    app.run(debug=True,port=8080)

2.接收接口袍嬉,在子進(jìn)程中調(diào)用: simple.py

# coding:utf-8
# Created by Allen Zhang
# Date: 2017/7/15


from flask_restful import Api, Resource
from flask import Flask, request, jsonify

app = Flask(__name__)
api = Api(app)


class Next(Resource):
    def post(self):
        data = request.get_data()
        # print(data)
        print('調(diào)用接收服務(wù)成功:接收內(nèi)容是:%s' % data.decode())
        return jsonify({'msg': 'Success'})


api.add_resource(Next, '/v1/next')

if __name__ == '__main__':
    app.run(debug=True, port=8090)

測(cè)試

同時(shí)運(yùn)行 multiprocess.py和simple.py 。
在終端使用curl調(diào)用/v1/subprocess 接口灶平,檢查調(diào)用情況伺通,會(huì)發(fā)現(xiàn)子程序調(diào)用成功,并成功返回結(jié)果逢享。

curl -d {'wer':'ds'} http://127.0.0.1:8080/v1/subprocess

運(yùn)行結(jié)果

result.png

參考
廖雪峰的官網(wǎng)-多進(jìn)程
使用flask-restful創(chuàng)建接口

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末罐监,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子瞒爬,更是在濱河造成了極大的恐慌弓柱,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,036評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件侧但,死亡現(xiàn)場(chǎng)離奇詭異矢空,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)禀横,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,046評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門屁药,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人柏锄,你說我怎么就攤上這事者祖×⒗颍” “怎么了绢彤?”我有些...
    開封第一講書人閱讀 164,411評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵七问,是天一觀的道長。 經(jīng)常有香客問我茫舶,道長械巡,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,622評(píng)論 1 293
  • 正文 為了忘掉前任饶氏,我火速辦了婚禮讥耗,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘疹启。我一直安慰自己古程,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,661評(píng)論 6 392
  • 文/花漫 我一把揭開白布喊崖。 她就那樣靜靜地躺著挣磨,像睡著了一般。 火紅的嫁衣襯著肌膚如雪荤懂。 梳的紋絲不亂的頭發(fā)上茁裙,一...
    開封第一講書人閱讀 51,521評(píng)論 1 304
  • 那天,我揣著相機(jī)與錄音节仿,去河邊找鬼晤锥。 笑死,一個(gè)胖子當(dāng)著我的面吹牛廊宪,可吹牛的內(nèi)容都是我干的矾瘾。 我是一名探鬼主播,決...
    沈念sama閱讀 40,288評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼箭启,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼壕翩!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起册烈,我...
    開封第一講書人閱讀 39,200評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤戈泼,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后赏僧,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體大猛,經(jīng)...
    沈念sama閱讀 45,644評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,837評(píng)論 3 336
  • 正文 我和宋清朗相戀三年淀零,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了挽绩。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,953評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡驾中,死狀恐怖唉堪,靈堂內(nèi)的尸體忽然破棺而出模聋,到底是詐尸還是另有隱情,我是刑警寧澤唠亚,帶...
    沈念sama閱讀 35,673評(píng)論 5 346
  • 正文 年R本政府宣布链方,位于F島的核電站,受9級(jí)特大地震影響灶搜,放射性物質(zhì)發(fā)生泄漏祟蚀。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,281評(píng)論 3 329
  • 文/蒙蒙 一割卖、第九天 我趴在偏房一處隱蔽的房頂上張望前酿。 院中可真熱鬧,春花似錦鹏溯、人聲如沸罢维。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,889評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽肺孵。三九已至,卻和暖如春取试,著一層夾襖步出監(jiān)牢的瞬間悬槽,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,011評(píng)論 1 269
  • 我被黑心中介騙來泰國打工瞬浓, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留初婆,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,119評(píng)論 3 370
  • 正文 我出身青樓猿棉,卻偏偏與公主長得像磅叛,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子萨赁,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,901評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容