最近迷上了用python處理衛(wèi)星數(shù)據(jù)冠胯,gdal包是不得不提的一個(gè)。本篇文章寫于程序運(yùn)行時(shí)的等待過(guò)程中锦针,時(shí)間緊迫不免有些疏漏荠察。另置蜀,我本人也只是一只菜雞,寫此教程的目的悉盆,也在于總結(jié)這兩星期的經(jīng)驗(yàn)教訓(xùn)盯荤,祭奠一下走過(guò)的彎路浪費(fèi)的時(shí)間。希望各位大佬們不要笑話焕盟,也請(qǐng)多多提建議秋秤,幫助小張同學(xué)提高業(yè)務(wù)能力。廢話不再多說(shuō)脚翘,進(jìn)入正題W坡!来农!
"gdal"是一個(gè)開源的鞋真、功能強(qiáng)大的柵格文件讀寫庫(kù)∥钟冢可是它的"安裝"有時(shí)卻讓小白們感到疼痛涩咖;好不容易跟著教程安裝成了,在運(yùn)行過(guò)程中繁莹,當(dāng)需要處理的數(shù)據(jù)太大時(shí)檩互,卻被頻頻提示"內(nèi)存錯(cuò)誤"?– 如,memoryerror:unable to allocate 43.9 mib for an array with shape (4800, 4800) and data typeuint16咨演。
出現(xiàn)"memoryerror"的原因有很多闸昨。其中一種是因?yàn)椤?b>python版本過(guò)低/在win64操作系統(tǒng)上安裝了win32版本的python”;當(dāng)安裝的是32位的python時(shí)雪标,即使用戶將”虛擬內(nèi)存”的設(shè)置的再大零院,也無(wú)法從根本上解決” memoryerror”(虛擬內(nèi)存的設(shè)置請(qǐng)參照https://zhuanlan.zhihu.com/p/37332255)溉跃。原因在小節(jié)一中詳述村刨。本篇教程將從最基本的windows系統(tǒng)下的python安裝開始講起,希望可以幫助遇此問(wèn)題的蟲友撰茎。
教程目錄如下:
一.Python的下載嵌牺、安裝和配置
二.當(dāng)電腦中裝有多個(gè)python版本時(shí),如何使他們兼容
三.用”pip install”法在python下安裝gdal庫(kù)
四.配置windows虛擬內(nèi)存
##############################################################################
一.Python的下載龄糊、安裝和配置
電腦上裝有arcgis等軟件的小白會(huì)發(fā)現(xiàn)逆粹,python2.7早已順帶被裝載了自己的電腦里。需注意的是 –此python版本的環(huán)境是32位的炫惩!即使電腦內(nèi)存非常大僻弹,處理非常大的衛(wèi)星數(shù)據(jù)時(shí),你的32位python也非常有可能遇到"memoryerror"問(wèn)題他嚷。這是因?yàn)?32位操作系統(tǒng)可以尋址2的32次方個(gè)字節(jié)的內(nèi)存范圍蹋绽,64位操作系統(tǒng)則可尋址2的64次方個(gè)字節(jié)的內(nèi)存范圍芭毙。因此,32位的操作系統(tǒng)理論上只能使用約4GB的內(nèi)存卸耘,要是想讓程序使用超過(guò)4GB的內(nèi)存退敦,就要選擇64位的操作系統(tǒng)。"
Python可以在https://www.python.org/上免費(fèi)下載蚣抗,我選擇了64位的Python 3.8.6侈百。安裝包選擇的是Windows x86-64 executable installer (圖一), 因?yàn)樗奖阌脩糇远x”程序儲(chǔ)存路徑”以及自動(dòng)添加”path環(huán)境變量”。 自定義”程序儲(chǔ)存路徑” 就不贅述了翰铡,個(gè)人認(rèn)為路徑越簡(jiǎn)單越好(我就直接存儲(chǔ)為"C:\python3.8" , 以下的講解也以此為示范钝域,大家可以根據(jù)自己的便利選擇儲(chǔ)存路徑)。
安裝好后两蟀,檢查系統(tǒng)環(huán)境變量的path (圖二)(檢查方式請(qǐng)參照: https://jingyan.baidu.com/article/8ebacdf02d3c2949f65cd5d0.html)网梢。若打開系統(tǒng)變量的path,發(fā)現(xiàn)已經(jīng)有"C:\python3.8\Scripts\" 和"C:\python3.8\" 赂毯,則說(shuō)明path已經(jīng)被設(shè)置好战虏;若沒(méi)有的話,可自己手動(dòng)添加党涕。
二.當(dāng)電腦中裝有多個(gè)python版本時(shí)烦感,如何使他們兼容
有一個(gè)需要注意的問(wèn)題- 當(dāng)電腦里安裝了多個(gè)版本的Python時(shí),并嘗試裝一些包如gdal或者更新pip時(shí)膛堤,會(huì)報(bào)錯(cuò)手趣。那么如何配置才能使他們兼容,不影響用戶的使用呢肥荔?原則就是將不同版本下的"python.exe"和"pip.exe"分別命名绿渣。如,將Python3.8.6的命名為”python38.exe”和”pip38.exe”燕耿; 將Python2.7.5的命名為”python27.exe”和”pip27.exe”中符。具體請(qǐng)參照https://blog.csdn.net/qq_40260867/article/details/84062299。在此不做贅述誉帅。
我的電腦里同時(shí)裝有Python3.8.6和Python2.7.5淀散。打開CMD檢查一下”兼容”是否設(shè)置成功 (打開cmd的方式https://jingyan.baidu.com/article/e4511cf329b0e42b845eaf2e.html)。分別輸入python27和python38蚜锨,若像如圖三顯示的那樣档插,就是設(shè)置成功了。
三.用”pip install”法在python下安裝gdal庫(kù)
先在https://www.lfd.uci.edu/~gohlke/pythonlibs/里下載合適版本的gdal whl文件亚再。版本的選擇主要取決于”windows操作系統(tǒng)的位數(shù)”和”python的版本”郭膛。我是64位操作系統(tǒng),準(zhǔn)備在python3.8.6下安裝gdal庫(kù)氛悬,所以選擇下載”GDAL?3.1.3?cp38?cp38?win_amd64.whl”(圖四)则剃。cp后的38表示支持python3.3.6凄诞,amd后的64表示支持64位操作系統(tǒng)。記住下載gdal whl文件的儲(chǔ)存位置忍级。我的存在"C:\Users\zhang\Downloads"下帆谍。
gdal通過(guò)cmd用"pip instal"語(yǔ)法安裝。在第二小節(jié)里轴咱,我將python3.8.6的pip命名為了pip38汛蝙,所以在這里用pip38而不是pip。pip38 install后接續(xù)下載的gdal whl文件的儲(chǔ)存地址朴肺。如窖剑,pip38 install C:\Users\zhang\Downloads\GDAL-3.1.3-cp38-cp38-win_amd64.whl (圖五)
五.?配置windows虛擬內(nèi)存
至此,gdal已經(jīng)成功在python3.8.6中成功安裝了鞍盗。為了進(jìn)一步確保程序運(yùn)行過(guò)程中需了,不會(huì)再出現(xiàn)內(nèi)存錯(cuò)誤,我們可以進(jìn)一步配置windows虛擬內(nèi)存般甲。虛擬內(nèi)存的設(shè)置請(qǐng)參照https://zhuanlan.zhihu.com/p/37332255?肋乍。內(nèi)存可以根據(jù)自己的需要自定義設(shè)置大小。由圖六可以看到敷存,目前C盤下墓造,我的可用空間為:37686MB。我將初始大小以及最大值均設(shè)置為: 30000MB锚烦。當(dāng)然這是一個(gè)比較夸張的設(shè)定觅闽。為了不要再由內(nèi)存錯(cuò)誤,我也是拼了涮俄。
設(shè)置好后重啟電腦蛉拙。然后在python3.8中運(yùn)行代碼。無(wú)錯(cuò)禽拔!快速刘离!流暢室叉!開心的蹦蹦跳跳6闷堋!<牒邸野来!