前言
最近在玩兒公主連結(jié)臣咖，之前也玩兒過陰陽師這樣的游戲控硼，這樣的游戲都會有個初始號這樣的東西，或者說是可以肝的東西戳杀。
當(dāng)然该面，作為一名程序員，肝這種東西完全可以用寫代碼的方式幫我們自動完成信卡。游戲腳本其實并不高深隔缀，最簡單的體驗方法就是下載一個Airtest了，直接截幾個圖片傍菇，寫幾層代碼猾瘸，就可以按照自己的邏輯玩兒游戲了。
當(dāng)然丢习，本篇文章不是要講Airtest這個怎么用牵触，而是用原始的python+opencv來實現(xiàn)上面的操作。
這兩天我寫了一個公主連結(jié)刷初始號的程序咐低，也不能算寫游戲腳本的老手荒吏，這篇文章主要是分享一些基礎(chǔ)的技術(shù)和使用上的心得吧。
準(zhǔn)備工作
首先渊鞋，我們要完成以下準(zhǔn)備绰更。
安卓設(shè)備一個：模擬器或者真機都可以。
安裝ADB锡宋，并添加到系統(tǒng)的PATH里：adb是用來
安裝tesseract-ocr儡湾，并添加到系統(tǒng)的PATH里：幫助我們實現(xiàn)簡單的字符識別
安裝python3.7以上的版本
這里adb和tesseract我放在百度網(wǎng)盤里了，里面順便放了一個錄制的效果視頻执俩。
鏈接：pan.baidu.com/s/1edTPu2o7… 提取碼：33aw
python庫安裝
pipinstall pillow pytesseract opencv-python復(fù)制代碼
除此以外徐钠，如果有需要可以安裝uiautomator2，這篇文章就不涉及這塊知識了役首。
使用adb獲取安卓設(shè)備
這里我們主要是涉及到單個安卓設(shè)備的ADB連接操作尝丐，首先我們打開模擬器。
然后我們調(diào)用adb devices來獲取當(dāng)前的安卓設(shè)備衡奥，我這里是一個模擬器爹袁。
接下來可以調(diào)用adb shell測試一下是否能進入到安卓設(shè)備的shell環(huán)境下，確認(rèn)可以輸入exit退出即可矮固。
如果有的時候進不了shell失息，可以先調(diào)用一下adb kill-server，然后再調(diào)用adb devices。
可能常用的ADB Shell命令
接下來是一些ADB的命令操作盹兢。通過adb命令邻梆，我們可以用python來操作的安卓設(shè)備。
屏幕截圖
最常見的操作就是截圖了绎秒，先調(diào)用screencap截圖放到安卓設(shè)備里浦妄，然后再把截圖下拉到電腦。
deftake_screenshot():os.system("adb?shell?screencap?-p?/data/screenshot.png")??????os.system("adb?pull?/data/screenshot.png?./tmp.png")
下拉文件
下拉文件就是剛剛那個adb pull了见芹，以公主連結(jié)為例校辩，以下代碼可以導(dǎo)出賬號信息的xml，以后通過xml就可以登錄了辆童。
os.system(f"adb?pull?/data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml?./user_info.xml")
上傳文件
有了下拉自然就有上傳了，通過adb push即可完成惠赫。以公主連結(jié)為例把鉴，以下代碼可以完成賬號的切換。
#?切換賬號1os.system("adb?push?./user_info1.xml?/data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml")??#?切換賬號2os.system("adb?push?./user_info2.xml?/data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml")
點擊屏幕某個位置
defadb_click(center,?offset=(0,0)):(x,?y)?=?center??????x?+=?offset[0]??????y?+=?offset[1]??????os.system(f"adb?shell?input?tap?{x}?{y}")
輸入文字
text?="YourPassword"os.system(f"adb?shell?input?text?{text}")
刪除字符
有的時候輸入框會有輸入的緩存儿咱，我們需要刪除字符庭砍。
#?刪除10個字符foriinrange(10):os.system("adb?shell?input?keyevent?67")
查詢當(dāng)前運行的包名和Activity
通過以下代碼，可以查詢當(dāng)前運行的程序的Activity混埠，也可以順便查包名怠缸。
adbshell?dumpsys?activity?activities
停止某個應(yīng)用
有時候會需要停止某個應(yīng)用，需要提供應(yīng)用的包名钳宪。
adbshellamforce-stoptw.sonet.princessconnect
開啟某個應(yīng)用
開啟某個應(yīng)用需要提供包名以及Activity揭北。
adbshellamstart?-W?-n?tw.sonet.princessconnect/jp.co.cygames.activity.OverrideUnityActivity
圖像操作
對于圖像的操作第一就是圖像查找了，比如說像Airtest提供的這種吏颖，無非就是判斷某個圖像在不在截屏中搔体，在的話在什么位置。
除此之外還需要一些摳圖半醉，比如說我們想獲取賬號的id疚俱，賬號的等級，需要截取出一部分圖片然后進行OCR操作缩多。
圖像查找
圖像查找其實就是先拿到兩張圖片呆奕，然后調(diào)用cv2.matchTemplate方法來查找是否存在以及位置，這里匹配是一個相對模糊的匹配衬吆，會有一個相似度的概率梁钾，最高是1。我們設(shè)定一個閾值來判斷模板是否在截屏里即可逊抡。
這里截屏如下陈轿，文件名為tmp.png：
模板如下：
代碼如下：
importcv2defimage_to_position(screen,?template):image_x,?image_y?=?template.shape[:2]??????result?=?cv2.matchTemplate(screen,?template,?cv2.TM_CCOEFF_NORMED)??????min_val,?max_val,?min_loc,?max_loc?=?cv2.minMaxLoc(result)??????print("prob:",?max_val)ifmax_val?>0.98:globalcenter??????????center?=?(max_loc[0]?+?image_y?/2,?max_loc[1]?+?image_x?/2)returncenterelse:returnFalseif__name__?=="__main__":??????screen?=?cv2.imread('tmp.png')??????template?=??cv2.imread('Xuandan.png')??????print(image_to_position(screen,?template))
運行上述代碼后，可以看到模板匹配出來的概率為0.9977，位置為(1165, 693)麦射，對于一張圖片蛾娶，左上角為原點，因為我的分辨率是1280 * 720潜秋，那么右下角的坐標(biāo)就是(1280, 720)蛔琅。可以看到我們這個選單其實就是剛好在右下角的位置峻呛。
如何快速裁剪模板罗售？（win10）
游戲腳本其實并不是代碼很難寫，而是需要截很多的圖钩述，這些圖要保證分辨率和原始一樣寨躁。我發(fā)現(xiàn)在win10如果用畫圖打開圖片
可以保證使用QQ截屏出來的分辨率，和圖片本身的分辨率一樣牙勘。
這個時候直接用qq截屏出來的模板即可直接用于識別职恳。
圖像裁剪
接下來就是有時候需要裁剪一些圖像了，當(dāng)然我們的模板圖片也可以通過裁剪圖片的方式得到方面，這樣的模板圖片是最準(zhǔn)的放钦。
裁剪其實就是需要裁剪的位置，以及需要的高度和寬度恭金，說白了就是一篇長方形的區(qū)域操禀，下面的代碼使用PIL庫實現(xiàn)。
fromPILimportImagedefcrop_screenshot(img_file,?pos_x,?pos_y,?width,?height,?out_file):img?=?Image.open(img_file)??????region?=?(pos_x,?pos_y,?pos_x?+?width,?pos_y?+?height)??????cropImg?=?img.crop(region)??????cropImg.save(out_file)??????print("exported:",?out_file)if__name__?=="__main__":??????crop_screenshot("tmp.png",817,556,190,24,"test_id.png")
上面的代碼以截取玩家的id為例横腿。
運行代碼后颓屑，得到截圖如下：
簡單的OCR
得到了以上的圖片信息后就是進行OCR了，也就是光學(xué)字符識別耿焊。這里代碼非常簡單邢锯，只要調(diào)用API即可。
fromPILimportImageimportpytesseract??image?=?Image.open('test_id.png')??content?=?pytesseract.image_to_string(image)#?識別圖片??print(content)
不過需要注意的一點就是pytesseract識別出來的結(jié)果會有空格符搀别，換行符這樣的符號丹擎，真正要用的時候進行一些字符的過濾即可。
The End
這篇文章到這里就結(jié)束了歇父，主要還是介紹一些ADB以及圖像相關(guān)的基礎(chǔ)操作蒂培。謝謝大家的觀看。
