【Tensorflow】GPU訓(xùn)練ssd模型

1. 硬件環(huán)境

操作系統(tǒng): Windows 10
CPU:i7 8700k 3.7GHZ
GPU:Geforce GTX 1080ti
內(nèi)存: 8G

2. 文件目錄

3. 安裝步驟

  • 安裝主板集成顯卡驅(qū)動(dòng)
    下個(gè)驅(qū)動(dòng)精靈安裝即可,安裝驅(qū)動(dòng)完成后贴硫,再關(guān)機(jī)插入Geforce GTX 1080ti
    
  • 安裝Geforce GTX 1080ti驅(qū)動(dòng)
    1. 可以去nvida官網(wǎng)下載英遭,我下載的是388.43-desktop-win10-64bit-international-whql
    2. 如果提示“此NVIDA驅(qū)動(dòng)程序不支持此操作系統(tǒng)類型”
        原因是亦渗,windows 10操作系統(tǒng)版本太老的緣故法精,去“更新”里面更新下操作系統(tǒng)(如果你的版本很老,會(huì)耗時(shí)很長(zhǎng))
    
  • 安裝Anaconda5.0.1 For Windows
    Anaconda:https://www.continuum.io/downloads
    Python 3.6 version 64BIT INSTALLER:https://repo.continuum.io/archive/Anaconda3-5.0.1-Windows-x86_64.exe
    
  • 安裝Tensorflow-gpu
    conda install pip
    pip install --ignore-installed --upgrade tensorflow-gpu
    
  • 添加系統(tǒng)環(huán)境變量PYTHONPATH
    環(huán)境變量-->(系統(tǒng)變量下新建PYTHONPATH)加入以下內(nèi)容:
    C:\suredata\0bject-Detector-App;C:\suredata\0bject-Detector-App\slim
    
  • 安裝vc_redist.x64.exe
    由于tensorflow只支持CUDA8.0和CUDNN v6 版本辽装,所以要先裝拾积,要不然會(huì)有以下錯(cuò)誤:
    ModuleNotFoundError: No module named '_pywrap_tensorflow_internal'
    
    安裝CUDA8.0 + cudnn6.0:
    注意: 有的說(shuō)cudnn5.1也可以拓巧,但是我試了win10最新系統(tǒng)上一死,cudnn5.1不可以摘符,仍然提示上面錯(cuò)誤
    1. 安裝CUDA8.0
        [下載地址](https://developer.nvidia.com/compute/cuda/8.0/Prod2/local_installers/cuda_8.0.61_win10-exe)
    2. cudnn6.0      
       [下載地址](https://developer.nvidia.com/rdp/cudnn-download#a-collapse6-8)
    3. 把解壓后的文件夾復(fù)制到CUDA8.0的安裝目錄文件夾內(nèi)逛裤。
       默認(rèn)CUDA8.0的安裝目錄為:C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v8.0
    

3. 訓(xùn)練

  • 管理員權(quán)限打開(kāi)cmd并執(zhí)行步驟2的命令開(kāi)始訓(xùn)練
    1. cd C:\suredata\0bject-Detector-App
    2. 執(zhí)行如下命令開(kāi)始訓(xùn)練:python object_detection\train.py --logoutstderr --train_dir=sd_train\ssd_model_2017_12_21\output --pipeline_config_path=sd_train\ssd_model_2017_12_21\ssd_mobilenet_v1_pascal.config
    

訓(xùn)練情況:

開(kāi)始訓(xùn)練
  • 生成模型
    訓(xùn)練完成后用下列命令生成可用模型:
    python object_detection\export_inference_graph.py --input_type image_tensor --pipeline_config_path sd_train\ssd_model_2017_12_21\ssd_mobilenet_v1_pascal.config --trained_checkpoint_prefix sd_train\ssd_model_2017_12_21\output\model.ckpt-30000 --output_directory sd_train\ssd_model_2017_12_21\savedModel
    
    如果出現(xiàn)以下錯(cuò)誤:
    C:\suredata\0bject-Detector-App>python object_detection\export_inference_graph.py --input_type image_tensor --pipeline_config_path sd_train\ssd_model_2017_12_21\ssd_mobilenet_v1_pascal.config --trained_checkpoint_prefix sd_train\ssd_model_2017_12_21\output\model.ckpt-30000 --output_directory sd_train\ssd_model_2017_12_21\savedModel                                                        
    Traceback (most recent call last):
    File "object_detection\export_inference_graph.py", line 119, in <module>
      tf.app.run()
    File "C:\ProgramData\Anaconda3\lib\site-packages\tensorflow\python\platform\app.py", line 48, in run
      _sys.exit(main(_sys.argv[:1] + flags_passthrough))
    File "object_detection\export_inference_graph.py", line 115, in main
      FLAGS.output_directory, input_shape)
    File "C:\suredata\0bject-Detector-App\object_detection\exporter.py", line 427, in export_inference_graph
      input_shape, optimize_graph, output_collection_name)
    File "C:\suredata\0bject-Detector-App\object_detection\exporter.py", line 353, in _export_inference_graph
      postprocessed_tensors = detection_model.postprocess(output_tensors)
    File "C:\suredata\0bject-Detector-App\object_detection\meta_architectures\ssd_meta_arch.py", line 405, in postprocess
      class_predictions_without_background)
    File "C:\suredata\0bject-Detector-App\object_detection\builders\post_processing_builder.py", line 94, in score_converter_fn
      scaled_logits = tf.divide(logits, logit_scale, name='scale_logits')
    File "C:\ProgramData\Anaconda3\lib\site-packages\tensorflow\python\ops\math_ops.py", line 309, in divide
      return DivideDelegateWithName(x, name) / y
    File "C:\ProgramData\Anaconda3\lib\site-packages\tensorflow\python\ops\math_ops.py", line 294, in __truediv__
      return _truediv_python3(self.x, y, self.name)
    File "C:\ProgramData\Anaconda3\lib\site-packages\tensorflow\python\ops\math_ops.py", line 981, in _truediv_python3
      (x_dtype, y_dtype))   TypeError: x and y must have the same dtype, got tf.float32 != tf.int32 
    
    可以通過(guò)將C:\suredata\0bject-Detector-App\object_detection\builders\post_processing_builder.py中的:
    def _score_converter_fn_with_logit_scale(tf_score_converter_fn, logit_scale):
    """Create a function to scale logits then apply a Tensorflow function."""
    def score_converter_fn(logits):
      scaled_logits = tf.divide(logits, logit_scale, name='scale_logits')
      return tf_score_converter_fn(scaled_logits, name='convert_scores')
    score_converter_fn.__name__ = '%s_with_logit_scale' % (
        tf_score_converter_fn.__name__)
    return score_converter_fn
    
    修改為:
    def _score_converter_fn_with_logit_scale(tf_score_converter_fn, logit_scale):
    """Create a function to scale logits then apply a Tensorflow function."""
    def score_converter_fn(logits):
      cr = logit_scale
      cr = tf.constant([[cr]],tf.float32)
      scaled_logits = tf.divide(logits, cr, name='scale_logits')
      return tf_score_converter_fn(scaled_logits, name='convert_scores')
    score_converter_fn.__name__ = '%s_with_logit_scale' % (
        tf_score_converter_fn.__name__)
    return score_converter_fn
    
    再執(zhí)行生成模型命令:
    生成模型

    可以看到問(wèn)題解決阳堕。

幾個(gè)問(wèn)題:

  • GPU利用率始終上不去20%左右恬总,CPU80%
    原因是:
    
    
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末壹堰,一起剝皮案震驚了整個(gè)濱河市骡湖,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌谆焊,老刑警劉巖辖试,帶你破解...
    沈念sama閱讀 216,402評(píng)論 6 499
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件剃执,死亡現(xiàn)場(chǎng)離奇詭異肾档,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)俗慈,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,377評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門闺阱,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)酣溃,“玉大人赊豌,你說(shuō)我怎么就攤上這事碘饼。” “怎么了悲伶?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,483評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵艾恼,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我麸锉,道長(zhǎng)钠绍,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,165評(píng)論 1 292
  • 正文 為了忘掉前任花沉,我火速辦了婚禮五慈,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘主穗。我一直安慰自己,他們只是感情好毙芜,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,176評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布忽媒。 她就那樣靜靜地躺著,像睡著了一般架曹。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上万牺,一...
    開(kāi)封第一講書(shū)人閱讀 51,146評(píng)論 1 297
  • 那天核无,我揣著相機(jī)與錄音炼彪,去河邊找鬼佑惠。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的特愿。 我是一名探鬼主播,決...
    沈念sama閱讀 40,032評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼兜畸,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了逸邦?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 38,896評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤妓局,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后炬搭,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,311評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡彼绷,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,536評(píng)論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了昔馋。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片邦危。...
    茶點(diǎn)故事閱讀 39,696評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡陵且,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤最爬,帶...
    沈念sama閱讀 35,413評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏晦墙。R本人自食惡果不足惜抗楔,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,008評(píng)論 3 325
  • 文/蒙蒙 一入热、第九天 我趴在偏房一處隱蔽的房頂上張望郑气。 院中可真熱鬧,春花似錦、人聲如沸嘱腥。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,659評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春罐农,著一層夾襖步出監(jiān)牢的瞬間拆内,已是汗流浹背抹沪。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,815評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工隅要, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人吹埠。 一個(gè)月前我還...
    沈念sama閱讀 47,698評(píng)論 2 368
  • 正文 我出身青樓鸽心,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親钞澳。 傳聞我的和親對(duì)象是個(gè)殘疾皇子通惫,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,592評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容