如何用Python寫遊戲指令碼?
前言
最近在玩兒公主連結,之前也玩兒過陰陽師這樣的遊戲,這樣的遊戲都會有個初始號這樣的東西,或者說是可以肝的東西。
當然,作為一名程式設計師,肝這種東西完全可以用寫程式碼的方式幫我們自動完成。遊戲指令碼其實並不高深,最簡單的體驗方法就是下載一個Airtest了,直接截幾個圖片,寫幾層程式碼,就可以按照自己的邏輯玩兒遊戲了。
當然,本篇文章不是要講Airtest這個怎麼用,而是用原始的python+opencv來實現上面的操作。
這兩天我寫了一個公主連結刷初始號的程式,也不能算寫遊戲指令碼的老手,這篇文章主要是分享一些基礎的技術和使用上的心得吧。
準備工作
首先,我們要完成以下準備。
- 安卓裝置
- 安裝ADB,並新增到系統的PATH裡:adb是用來
- 安裝tesseract-ocr,並新增到系統的PATH裡:幫助我們實現簡單的字元識別
- 安裝python3.7以上的版本
這裡adb和tesseract我放在百度網盤裡了,裡面順便放了一個錄製的效果視訊。
連結:https://pan.baidu.com/s/1edTPu2o7p0vp0uNfiok9LQ" target="_blank" rel="nofollow noopener noreferrer">pan.baidu.com/s/1edTPu2o7… 提取碼:33aw
python庫安裝
pip install pillow pytesseract opencv-python
除此以外,如果有需要可以安裝uiautomator2,這篇文章就不涉及這塊知識了。
使用adb
獲取安卓裝置
這裡我們主要是涉及到單個安卓裝置的ADB連線操作,首先我們開啟模擬器。
然後我們呼叫adb devices
來獲取當前的安卓裝置,我這裡是一個模擬器。
接下來可以呼叫adb shell
測試一下是否能進入到安卓裝置的shell環境下,確認可以輸入exit
退出即可。
如果有的時候進不了shell,可以先呼叫一下adb kill-server
,然後再呼叫adb devices
。
可能常用的ADB Shell命令
接下來是一些ADB的命令操作。通過adb命令,我們可以用python來操作的安卓裝置。
螢幕截圖
最常見的操作就是截圖了,先呼叫screencap
截圖放到安卓裝置裡,然後再把截圖下拉到電腦。
def take_screenshot(): os.system("adb shell screencap -p /data/screenshot.png") os.system("adb pull /data/screenshot.png ./tmp.png")
下拉檔案
下拉檔案就是剛剛那個adb pull
了,以公主連結為例,以下程式碼可以匯出賬號資訊的xml,以後通過xml就可以登入了。
os.system(f"adb pull /data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml ./user_info.xml")
上傳檔案
有了下拉自然就有上傳了,通過adb push
即可完成。以公主連結為例,以下程式碼可以完成賬號的切換。
# 切換賬號1 os.system("adb push ./user_info1.xml /data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml") # 切換賬號2 os.system("adb push ./user_info2.xml /data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml")
點選螢幕某個位置
def adb_click(center, offset=(0, 0)): (x, y) = center x += offset[0] y += offset[1] os.system(f"adb shell input tap {x} {y}")
輸入文字
text = "YourPassword" os.system(f"adb shell input text {text}")
刪除字元
有的時候輸入框會有輸入的快取,我們需要刪除字元。
# 刪除10個字元 for i in range(10): os.system("adb shell input keyevent 67")
查詢當前執行的包名和Activity
通過以下程式碼,可以查詢當前執行的程式的Activity,也可以順便查包名。
adb shell dumpsys activity activities
停止某個應用
有時候會需要停止某個應用,需要提供應用的包名。
adb shell am force-stop tw.sonet.princessconnect
開啟某個應用
開啟某個應用需要提供包名以及Activity。
adb shell am start -W -n tw.sonet.princessconnect/jp.co.cygames.activity.OverrideUnityActivity
影象操作
對於影象的操作第一就是影象查找了,比如說像Airtest提供的這種,無非就是判斷某個影象在不在截圖中,在的話在什麼位置。
除此之外還需要一些摳圖,比如說我們想獲取賬號的id
,賬號的等級
,需要截取出一部分圖片然後進行OCR操作。
影象查詢
影象查詢其實就是先拿到兩張圖片,然後呼叫cv2.matchTemplate
方法來查詢是否存在以及位置,這裡匹配是一個相對模糊的匹配,會有一個相似度的概率,最高是1。我們設定一個閾值來判斷模板是否在截圖裡即可。
這裡截圖如下,檔名為tmp.png
:
模板如下:
程式碼如下:
import cv2 def image_to_position(screen, template): image_x, image_y = template.shape[:2] result = cv2.matchTemplate(screen, template, cv2.TM_CCOEFF_NORMED) min_val, max_val, min_loc, max_loc = cv2.minMaxLoc(result) print("prob:", max_val) if max_val > 0.98: global center center = (max_loc[0] + image_y / 2, max_loc[1] + image_x / 2) return center else: return False if __name__ == "__main__": screen = cv2.imread('tmp.png') template = cv2.imread('Xuandan.png') print(image_to_position(screen, template))
執行上述程式碼後,可以看到模板匹配出來的概率為0.9977
,位置為(1165, 693),對於一張圖片,左上角為原點,因為我的解析度是1280 * 720,那麼右下角的座標就是(1280, 720)。可以看到我們這個選單其實就是剛好在右下角的位置。
如何快速裁剪模板?(win10)
遊戲指令碼其實並不是程式碼很難寫,而是需要截很多的圖,這些圖要保證解析度和原始一樣。我發現在win10如果用畫圖可以保證使用QQ截圖出來的解析度,和圖片本身的解析度一樣
這個時候直接用qq截圖出來的模板即可直接用於識別。
影象裁剪
接下來就是有時候需要裁剪一些影象了,當然我們的模板圖片也可以通過裁剪圖片的方式得到,這樣的模板圖片是最準的。
裁剪其實就是需要裁剪的位置,以及需要的高度和寬度,說白了就是一篇長方形的區域,下面的程式碼使用PIL庫實現。
from PIL import Image def crop_screenshot(img_file, pos_x, pos_y, width, height, out_file): img = Image.open(img_file) region = (pos_x, pos_y, pos_x + width, pos_y + height) cropImg = img.crop(region) cropImg.save(out_file) print("exported:", out_file) if __name__ == "__main__": crop_screenshot("tmp.png", 817,556, 190, 24, "test_id.png")
上面的程式碼以擷取玩家的id為例。
簡單的OCR
得到了以上的圖片資訊後就是進行OCR了,也就是光學字元識別。這裡程式碼非常簡單,只要呼叫API即可。
from PIL import Image import pytesseract image = Image.open('test_id.png') content = pytesseract.image_to_string(image) # 識別圖片 print(content)
不過需要注意的一點就是pytesseract識別出來的結果會有空格符,換行符這樣的符號,真正要用的時候進行一些字元的過濾即可。
The End
這篇文章到這裡就結束了,主要還是介紹一些ADB以及影象相關的基礎操作,有些內容比如說多開和uiautomator2因為我暫時沒用到所以就沒寫,百度一下應該也不是很難。程式碼寫的比較醜還沒完善好,就先不放了。