tensorflow的saved_model存取模型

一種工程級(jí)方便的存取模型的方法,saved_model
通過(guò)存取一個(gè)簡(jiǎn)單的模型來(lái)作為示范
首先是模型定義

import tensorflow as tf
import numpy as np


W = tf.get_variable(name="demo", initializer=tf.ones([10, 32],dtype=tf.float32))
x = tf.placeholder(dtype=tf.float32, shape=[None, 10])

y = tf.matmul(x, W)
y_ = np.ones(shape=[10, 32], dtype=np.float32) # 使用np來(lái)創(chuàng)造兩個(gè)label

cost = tf.nn.sigmoid_cross_entropy_with_logits(logits=y, labels=y_, name=None)
train_op = tf.train.GradientDescentOptimizer(0.01).minimize(cost)

這里定義了一個(gè)簡(jiǎn)單的矩陣乘枢泰, 然后我們來(lái)簡(jiǎn)單的訓(xùn)練幾步

with tf.Session() as sess:
    init = tf.global_variables_initializer()
    sess.run(init)
    feed_dict = {x: np.ones([10, 10])}
    for i in range(100):
        sess.run(train_op, feed_dict=feed_dict)
    print(sess.run(y, feed_dict=feed_dict))

現(xiàn)在我們想把這個(gè)模型存儲(chǔ)起來(lái)危号,傳統(tǒng)的做法是用ckpt來(lái)做今野,現(xiàn)在tensorflow提供一種更強(qiáng)大簡(jiǎn)便的方法

首先構(gòu)建兩個(gè)字典干奢,inputs 和 outputs, 把要存入的變量放入字典中
其中 tf.saved_model.utils.build_tensor_info是把變量變成可緩存對(duì)象的函數(shù)

    saved_model_dir = "save_model"
    signature_key = 'test_signature'
    input_key = 'input_x'
    output_key = 'output'

    # x 為輸入tensor
    inputs = {input_key: tf.saved_model.utils.build_tensor_info(x)}
    # y 為最終需要的輸出結(jié)果tensor
    outputs = {output_key: tf.saved_model.utils.build_tensor_info(y)}

然后把兩個(gè)字典打包放入 signature 中

signature = tf.saved_model.signature_def_utils.build_signature_def(
        inputs=inputs,
        outputs=outputs,
        method_name=signature_key)

然后建立SavedModelBuilder另患,并以signature的形式添加要存儲(chǔ)的變量

builder = tf.saved_model.builder.SavedModelBuilder(saved_model_dir)
builder.add_meta_graph_and_variables(
        sess=sess,
        tags=['test_saved_model'],
        signature_def_map={signature_key: signature},
        clear_devices=True)
    builder.save()

saved_model_dir 是要存模型的文件夾,可以是一個(gè)不存在的目錄名芳绩,save之后掀亥,包括圖結(jié)構(gòu),變量的內(nèi)容妥色,都會(huì)被存入到新創(chuàng)建的 saved_model_dir 目錄內(nèi)搪花,下圖就是存好的模型


下面我們來(lái)取出一個(gè)訓(xùn)練好的模型
用 tf.saved_model.loader.load 從 模型文件夾中取出模型
其中tags字段是['test_saved_model'], 與存模型時(shí)候指定的字段相同
把模型導(dǎo)入到session之后嘹害, 取出signature 就從signature中取出存入的變量了

saved_model_dir = "save_model"
signature_key = 'test_signature'
input_key = 'input_x'
output_key = 'output'

with tf.Session() as sess1:

    meta_graph_def = tf.saved_model.loader.load(sess1, ['test_saved_model'], saved_model_dir)
    signature = meta_graph_def.signature_def
    x_tensor_name = signature[signature_key].inputs[input_key].name
    y_tensor_name = signature[signature_key].outputs[output_key].name
    print(x_tensor_name)
    print(y_tensor_name)
    x = sess1.graph.get_tensor_by_name(x_tensor_name)
    y = sess1.graph.get_tensor_by_name(y_tensor_name)
    feed_dict = {x: np.ones([1, 10])}
    print(sess1.run(y, feed_dict=feed_dict))

我們看到撮竿,首先我們從signature 和 inputs/outputs都是一種字典的封裝,把tensor_name存入到了字典中
傳統(tǒng)的導(dǎo)入 需要用get_tensor_by_name 吼拥, 這樣就需要記錄tensor的name熟悉倚聚,很麻煩。
通過(guò)signature凿可,我們可以指定變量的別名惑折,方便存取。

另外枯跑,存模型和變量的時(shí)候惨驶,會(huì)把全部的模型圖存入,并不是只存我們指定幾個(gè)變量敛助,而signature只是方便我們存取想要使用的變量粗卜。

一個(gè)坑,使用tf.Session的時(shí)候纳击,切記默認(rèn)圖和指定圖的區(qū)別续扔。tf.Session()會(huì)導(dǎo)入默認(rèn)圖的結(jié)構(gòu), 而導(dǎo)入模型是需要依附于sess的圖焕数, 在默認(rèn)圖中導(dǎo)入模型纱昧,如果默認(rèn)圖定義了其他計(jì)算圖,會(huì)導(dǎo)致圖沖突堡赔,模型導(dǎo)不進(jìn)去识脆。!!灼捂!

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末离例,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子悉稠,更是在濱河造成了極大的恐慌宫蛆,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,496評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件的猛,死亡現(xiàn)場(chǎng)離奇詭異洒扎,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)衰絮,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,407評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)磷醋,“玉大人猫牡,你說(shuō)我怎么就攤上這事〉讼撸” “怎么了淌友?”我有些...
    開(kāi)封第一講書人閱讀 162,632評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)骇陈。 經(jīng)常有香客問(wèn)我震庭,道長(zhǎng),這世上最難降的妖魔是什么你雌? 我笑而不...
    開(kāi)封第一講書人閱讀 58,180評(píng)論 1 292
  • 正文 為了忘掉前任器联,我火速辦了婚禮,結(jié)果婚禮上婿崭,老公的妹妹穿的比我還像新娘拨拓。我一直安慰自己,他們只是感情好氓栈,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,198評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布渣磷。 她就那樣靜靜地躺著,像睡著了一般授瘦。 火紅的嫁衣襯著肌膚如雪醋界。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 51,165評(píng)論 1 299
  • 那天提完,我揣著相機(jī)與錄音形纺,去河邊找鬼。 笑死氯葬,一個(gè)胖子當(dāng)著我的面吹牛挡篓,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 40,052評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼官研,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼秽澳!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起戏羽,我...
    開(kāi)封第一講書人閱讀 38,910評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤担神,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后始花,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體妄讯,經(jīng)...
    沈念sama閱讀 45,324評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,542評(píng)論 2 332
  • 正文 我和宋清朗相戀三年酷宵,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了亥贸。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,711評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡浇垦,死狀恐怖炕置,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情男韧,我是刑警寧澤朴摊,帶...
    沈念sama閱讀 35,424評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站此虑,受9級(jí)特大地震影響甚纲,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜朦前,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,017評(píng)論 3 326
  • 文/蒙蒙 一介杆、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧韭寸,春花似錦这溅、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 31,668評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至莫其,卻和暖如春癞尚,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背乱陡。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 32,823評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工浇揩, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人憨颠。 一個(gè)月前我還...
    沈念sama閱讀 47,722評(píng)論 2 368
  • 正文 我出身青樓胳徽,卻偏偏與公主長(zhǎng)得像积锅,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子养盗,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,611評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容