目錄

1.前言

2.使用的擴展庫

3.思路

4.具體實現

1)? ?__main__

2)? ?GetGameWindow()

3)? getScreenImage()

4)? getAllSquare()

5)? getAllSquareTypes()

6)? getAllSquareRecord()

7)? autoRemove()

5.思考

1)? 窗體大小可修改

2)? 若空白塊變成漸變色的問題 /? 方塊不完全相同? / 同種周圍存在某些小特效導致pending結果為不同

6.總結

---

1.前言

繼python跳一跳之后的下一份python練習....先上一個成果圖 , 當然這里的東西僅供學習和參考 , 若用于其他途徑后果自負

當然開始之前要先來一句...Python大法好~...Java下這個代碼大概需要2000行左右,而python算上注釋也才300行而已

?

2.使用的擴展庫

python3.6 + opencv-python + pywin32 + PIL + numpy

若缺失庫,這里給出安裝命令

pip install opencv-python

pip install pypiwin32

pip install PIL

pip install numpy

若無法安裝請自行百度

注意分辨率需要 1920 * 1080

?

3.思路

通過win32定位游戲窗體,并獲取截圖

從截圖中定位需要pending的游戲區域

將圖片切片成二維單個方塊的Img地圖,并將方塊分類編號

將Img地圖轉換成二維編號矩陣

處理是否可以消除并模擬點擊

?

4.具體實現

1)? ?__main__

if __name__ == '__main__':# 撒隨機種子random.seed()# i. 定位游戲窗體game_pos = getGameWindow()# 定位到游戲窗體后等待一秒time.sleep(1)# ii. 獲取屏幕截圖screen_image = getScreenImage()# iii. 對截圖切片，形成一張二維地圖all_square_list = getAllSquare(screen_image,game_pos)# iv. 獲取所有類型的圖形，并編號types = getAllSquareTypes(all_square_list)# v. 講獲取的圖片地圖轉換成數字矩陣result = np.transpose(getAllSquareRecord(all_square_list,types))# vi. 執行消除 , 并輸出消除數量print('The total elimination amount is ' + str(autoRemove(result,game_pos)) )

2)? ?GetGameWindow()

# 獲取窗體坐標位置 def getGameWindow():# 通過窗口標題名稱定位游戲窗口window = win32gui.FindWindow(None,WINDOW_TITLE)# 若沒有定位到游戲窗體# 則10s后重新定位,直到定位到游戲窗口while not window:print('Failed to locate the game window , reposition the game window after 10 seconds...')time.sleep(10)window = win32gui.FindWindow(None,WINDOW_TITLE)# 將游戲窗口置頂win32gui.SetForegroundWindow(window) # 獲取窗口左上角的坐標pos = win32gui.GetWindowRect(window)print("Game windows at " + str(pos))return (pos[0],pos[1])

3)? getScreenImage()

# 獲取屏幕截圖 def getScreenImage():print('Shot screen...')# 獲取屏幕截圖 # 儲存在根目錄的 'screen.png'scim = ImageGrab.grab() scim.save('screen.png')# 用opencv讀取屏幕截圖 # 獲取ndarrayreturn cv2.imread("screen.png")

4)? getAllSquare()

# 從截圖中分辨圖片 處理成地圖 def getAllSquare(screen_image,game_pos):print('Processing pictures...')# 通過游戲窗體定位 加上偏移量獲取游戲區域的左上角坐標game_x = game_pos[0] + MARGIN_LEFTgame_y = game_pos[1] + MARGIN_HEIGHT# 從游戲區域左上開始# 把圖像按照具體大小切割成相同的小塊# 切割標準是按照小塊的橫縱坐標all_square = []for x in range(0,H_NUM):for y in range(0,V_NUM):# ndarray的切片方法 ： [縱坐標起始位置：縱坐標結束為止，橫坐標起始位置：橫坐標結束位置]square = screen_image[game_y + y * POINT_HEIGHT :game_y + (y+1) * POINT_HEIGHT,game_x + x * POINT_WIDTH:game_x + (x+1) * POINT_WIDTH]all_square.append(square)# 因為有些圖片的邊緣會造成干擾 所以統一把圖片往內縮小一圈# 對所有的方塊進行處理 去掉邊緣一圈后返回finalresult = []for square in all_square:s = square[SUB_LT_Y:SUB_RB_Y, SUB_LT_X:SUB_RB_X]finalresult.append(s)return finalresult

5)? getAllSquareTypes()

# 判斷列表中是否存在相同圖形 # 存在返回進行判斷圖片所在的id # 否則返回-1 def isImageExist(img,img_list):i = 0for existed_img in img_list:# 兩個圖片進行比較 返回的是兩個圖片的標準差b = np.subtract(existed_img,img) # 若標準差全為0 即兩張圖片沒有區別if not np.any(b): return ii = i + 1return -1# 獲取所有的方塊類型 def getAllSquareTypes(all_square):print("Init pictures types...")types = []# number列表用來記錄每個id的出現次數number = []# 當前出現次數最多的方塊 # 這里我們默認出現最多的方塊應該是空白塊nowid = 0;for square in all_square:nid = isImageExist(square,types)# 如果這個圖像不存在則插入列表if nid == -1 :types.append(square)number.append(1);else:# 若這個圖像存在則給計數器 + 1number[nid] = number[nid] + 1if (number[nid] > number[nowid]):nowid = nid# 更新EMPTY_ID # 即判斷在當前這張圖中的空白塊idglobal EMPTY_IDEMPTY_ID = nowidprint('EMPTY_ID = ' + str(EMPTY_ID))return types

6)? getAllSquareRecord()

# 將二維圖片矩陣轉換為二維數字矩陣 # 注意因為在上面對截屏切片時是以列為優先切片的 # 所以生成的record二維矩陣每行存放的其實是游戲屏幕中每列的編號 # 換個說法就是record其實是游戲屏幕中心對稱后的列表 def getAllSquareRecord(all_square_list,types):print("Change map...")record = [] line = [] for square in all_square_list: num = 0for type in types: res = cv2.subtract(square,type) if not np.any(res): line.append(num) break num += 1 # 每列的數量為V_NUM # 那么當當前的line列表中存在V_NUM個方塊時我們認為本列處理完畢if len(line) == V_NUM: print(line); record.append(line)line = []return record

7)? autoRemove()

# 判斷給出的兩個圖像能否消除 def canConnect(x1,y1,x2,y2,r):result = r[:]# 如果兩個圖像中有一個為0 直接返回Falseif result[x1][y1] == EMPTY_ID or result[x2][y2] == EMPTY_ID:return Falseif x1 == x2 and y1 == y2 :return Falseif result[x1][y1] != result[x2][y2]:return False# 判斷橫向連通if horizontalCheck(x1,y1,x2,y2,result):return True# 判斷縱向連通if verticalCheck(x1,y1,x2,y2,result):return True# 判斷一個拐點可連通if turnOnceCheck(x1,y1,x2,y2,result):return True# 判斷兩個拐點可連通if turnTwiceCheck(x1,y1,x2,y2,result):return True# 不可聯通返回Falsereturn False# 判斷橫向聯通 def horizontalCheck(x1,y1,x2,y2,result):if x1 == x2 and y1 == y2:return Falseif x1 != x2:return FalsestartY = min(y1, y2)endY = max(y1, y2)# 判斷兩個方塊是否相鄰if (endY - startY) == 1:return True# 判斷兩個方塊通路上是否都是0，有一個不是，就說明不能聯通，返回falsefor i in range(startY+1,endY):if result[x1][i] != EMPTY_ID:return Falsereturn True# 判斷縱向聯通 def verticalCheck(x1,y1,x2,y2,result):if x1 == x2 and y1 == y2:return Falseif y1 != y2:return FalsestartX = min(x1, x2)endX = max(x1, x2)# 判斷兩個方塊是否相鄰if (endX - startX) == 1:return True# 判斷兩方塊兒通路上是否可連。for i in range(startX+1,endX):if result[i][y1] != EMPTY_ID:return Falsereturn True# 判斷一個拐點可聯通 def turnOnceCheck(x1,y1,x2,y2,result):if x1 == x2 or y1 == y2:return Falsecx = x1cy = y2dx = x2dy = y1# 拐點為空，從第一個點到拐點并且從拐點到第二個點可通，則整條路可通。if result[cx][cy] == EMPTY_ID:if horizontalCheck(x1, y1, cx, cy, result) and verticalCheck(cx, cy, x2, y2, result):return Trueif result[dx][dy] == EMPTY_ID:if verticalCheck(x1, y1, dx, dy, result) and horizontalCheck(dx, dy, x2, y2, result):return Truereturn False# 判斷兩個拐點可聯通 def turnTwiceCheck(x1,y1,x2,y2,result):if x1 == x2 and y1 == y2:return False# 遍歷整個數組找合適的拐點for i in range(0,len(result)):for j in range(0,len(result[1])):# 不為空不能作為拐點if result[i][j] != EMPTY_ID:continue# 不和被選方塊在同一行列的不能作為拐點if i != x1 and i != x2 and j != y1 and j != y2:continue# 作為交點的方塊不能作為拐點if (i == x1 and j == y2) or (i == x2 and j == y1):continueif turnOnceCheck(x1, y1, i, j, result) and (horizontalCheck(i, j, x2, y2, result) or verticalCheck(i, j, x2, y2, result)):return Trueif turnOnceCheck(i, j, x2, y2, result) and (horizontalCheck(x1, y1, i, j, result) or verticalCheck(x1, y1, i, j, result)):return Truereturn False# 自動消除 def autoRelease(result,game_x,game_y):# 遍歷地圖for i in range(0,len(result)):for j in range(0,len(result[0])):# 當前位置非空if result[i][j] != EMPTY_ID:# 再次遍歷地圖 尋找另一個滿足條件的圖片for m in range(0,len(result)):for n in range(0,len(result[0])):if result[m][n] != EMPTY_ID:# 若可以執行消除if canConnect(i,j,m,n,result):# 消除的兩個位置設置為空result[i][j] = EMPTY_IDresult[m][n] = EMPTY_IDprint('Remove ：'+ str(i+1) + ',' + str(j+1) + ' and ' + str(m+1) + ',' + str(n+1))# 計算當前兩個位置的圖片在游戲中應該存在的位置x1 = game_x + j * POINT_WIDTHy1 = game_y + i * POINT_HEIGHTx2 = game_x + n * POINT_WIDTHy2 = game_y + m * POINT_HEIGHT# 模擬鼠標點擊第一個圖片所在的位置win32api.SetCursorPos((x1 + 15,y1 + 18))win32api.mouse_event(win32con.MOUSEEVENTF_LEFTDOWN, x1+15, y1+18, 0, 0)win32api.mouse_event(win32con.MOUSEEVENTF_LEFTUP, x1+15, y1+18, 0, 0)# 等待隨機時間 ，防止檢測time.sleep(random.uniform(TIME_INTERVAL_MIN,TIME_INTERVAL_MAX))# 模擬鼠標點擊第二個圖片所在的位置win32api.SetCursorPos((x2 + 15, y2 + 18))win32api.mouse_event(win32con.MOUSEEVENTF_LEFTDOWN, x2 + 15, y2 + 18, 0, 0)win32api.mouse_event(win32con.MOUSEEVENTF_LEFTUP, x2 + 15, y2 + 18, 0, 0)time.sleep(random.uniform(TIME_INTERVAL_MIN,TIME_INTERVAL_MAX))#執行消除后返回Truereturn Truereturn Falsedef autoRemove(squares,game_pos):game_x = game_pos[0] + MARGIN_LEFTgame_y = game_pos[1] + MARGIN_HEIGHT# 重復執行消除直到不存在可消除的方塊# 這里給出一個消除上限次數,防止代碼某些地方出錯對空白塊進行pending后死循環# while True:for i in range(0,MAX_ROUND):if not autoRelease(squares,game_x,game_y):# 當不再有可消除的方塊時結束 ， 返回消除數量return i;

?

5.思考

首先這個代碼肯定有許多的不足之處:

1)? 窗體大小可修改

當然如果要解決這個問題也不難,定位窗體時會獲得pos[4]四個參數,左上角和右下角的坐標,一般來說游戲界面是等比例放大的,所以只要計算具體的游戲區域占整個窗體的百分比即可

如果存在上面的問題,那么每個方塊的大小也需要修改

修改方法也不是很麻煩...同樣的首先獲取游戲區域的像素大小,不管游戲如何放大,游戲區域內能放下的方格矩陣長寬是不會變的,比如QQ游戲就是11 * 19 , 所以每個方塊的大小就用游戲區域的像素大小除一下就行了,邊緣處理也可以簡單的使用60%,至于為什么是60%....自己想吧

2)? 若空白塊變成漸變色的問題 /? 方塊不完全相同? / 同種周圍存在某些小特效導致pending結果為不同

其實也不難,這里判斷兩個方塊是否相同的方式是通過兩個圖像的標準差為0,那么如果存在漸變色,那么我們只要計算出一個誤差上限即可,標準差在誤差內,我們就認為它們是同一種方塊,這個問題就跟上面的60%一樣,因為我們這里一定要標準差為0才認為兩個方塊是一樣的,所以pending方塊不能有一點誤差,所以需要減掉的邊緣需要大一些,那么如果不強制要求100%相似度判斷的話,那自然也不需要減掉那么多邊緣,因為邊緣減掉的越多,也會造成另一種誤差

?

6.總結

顯然這里給出的代碼不包含config參數.....畢竟連config都一起給出來了那不是直接變成發布外掛了嗎....

至于我的參數是怎么得到的....我打開畫圖用手描出來的參數我會亂說?

當然不管怎么說這里還是會給出github:https://github.com/jnxxhzz/auto_lianliankan

打包好的.exe可執行文件 :?https://download.csdn.net/download/jnxxhzz/10571614

當然再次強調: Python大法好!!! 呸呸呸說錯了

---- 此項目開源僅僅是為了交流學習，大肆流傳可能會對其他公司的商業產品造成損失，所以請自覺遵守法律以及道德規范，切勿將其挪作他用，更不可用其獲取商業利益！

總結

以上是生活随笔為你收集整理的python — Auto_QQ连连看的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。