python+opencv+selenium自動化登錄郵箱并解決滑動驗證的問題
前言
大家做自動化登錄時可能都遇到過滑塊驗證碼需要手動驗證的問題,這次我們就來解決他
如下:
在我們做自動化登錄時,總會遇到各種奇奇怪怪的驗證碼,滑塊驗證碼就是其中最常見的一種。若我們的程序自動輸入賬號密碼之后,還需要我們?nèi)斯とセ瑒域炞C碼那還能稱得上是自動化嗎?
那么先給大家說一下我的‘解題步驟'。
1.使用selenium打開郵箱首頁。
2.定位到賬號密碼框,鍵入賬號密碼。
3.獲取驗證圖片,使用opencv處理返回滑塊應拖動的距離。
4.創(chuàng)建鼠標事件,模擬拖動滑塊完成驗證。
需要解決的問題:
1.頁面元素的定位。
2.文本框和驗證碼的frame嵌套。
3.opencv處理驗證圖片缺口圖像匹配并返回距離。
4.webdriver在網(wǎng)頁中使用xpath時如何定位自身元素。
5.原始圖片尺寸與在網(wǎng)頁中的實際尺寸同比例縮放(距離的縮放)。
OK,思路清晰上代碼?。?!
源代碼:
#滑稽研究所出品 from selenium.webdriver.common.keys import Keys from selenium.webdriver import ActionChains from selenium import webdriver import requests import time import cv2 #下載圖片 def download_img(url,filename): r = requests.get(url) with open( filename + '.png', 'wb') as f: # 對于圖片類型的通過r.content方式訪問響應內(nèi)容,將響應內(nèi)容寫入yanzheng.png中 f.write(r.content) print(filename + '下載完成') def get_image(): #為什么這里要定義全局變量?因為driver在函數(shù)內(nèi),函數(shù)運行完畢就會關(guān)閉, #相應的網(wǎng)頁也會被關(guān)閉,這就是網(wǎng)上很多問為什么網(wǎng)頁會自動關(guān)閉的原因。 global driver driver= webdriver.Chrome() #獲取瀏覽器對象 driver.get("https://mail.qq.com/") #加載百度首頁 #窗口最大化操作,如果窗口過小,會導致后續(xù)拖動滑塊時出現(xiàn)視野丟失的問題 driver.maximize_window() time.sleep(2) #睡眠兩秒 driver.find_element_by_xpath('/html/body/div/div[2]/div/div[1]/div/div[1]/div[2]').click() time.sleep(1) driver.switch_to.frame('login_frame') # driver.find_element_by_xpath('//*[@id="switcher_plogin"]').click() #輸入賬號密碼 input=driver.find_element_by_xpath('//*[@id="u"]')#定位QQ賬號框 time.sleep(1) input.send_keys("zhanghao") #搜索框輸入內(nèi)容 input=driver.find_element_by_xpath('//*[@id="p"]')#定位QQ密碼框 input.send_keys("你的密碼") #搜索框輸入內(nèi)容 print('賬號密碼輸入完成。') #這里停頓一下,不然不會顯示滑動驗證,應該是檢測自動化工具的手段。(反爬) time.sleep(1) driver.find_element_by_xpath('//*[@id="login_button"]').click() #注意我們這里又需要跳到驗證碼的子框(又一個嵌套) time.sleep(1) driver.switch_to.frame('tcaptcha_iframe') #webdriver的定位方法和瀏覽器xpath不一樣,不能直接定位到標簽的屬性. #需要首先定位到webelement,之后get到屬性!!!!!!! bk = driver.find_element_by_xpath('//*[@id="slideBg"]').get_attribute('src') print(bk) #獲取背景和滑塊地址,下載到本地。 key = driver.find_element_by_xpath('//*[@id="slideBlock"]').get_attribute('src') print(bk) download_img(bk,filename= 'bk') download_img(key,filename= 'key') #鎖定滑塊 slider = driver.find_element_by_xpath('//*[@id="tcaptcha_drag_thumb"]') #獲取應滑動距離 dis = get_distance() print(dis) #滑塊部分,沒有問題,已完成。 newact = ActionChains(driver) newact.click_and_hold(slider).perform() newact.move_by_offset(xoffset=dis-20,yoffset=0).perform() time.sleep(0.5) newact.release().perform() #處理得到滑塊應移動的距離。 def get_distance(): path = 'bk.png' img = cv2.imread(path) path = 'key.png' img2 = cv2.imread(path) imgContour = img.copy() print('img.shape:', img.shape) imgGray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY) imgBlur = cv2.GaussianBlur(imgGray, (3, 3), 1) imgCanny = cv2.Canny(imgBlur, 400, 500) imgGray2 = cv2.cvtColor(img2, cv2.COLOR_BGR2GRAY) imgBlur2 = cv2.GaussianBlur(imgGray2, (3, 3), 1) imgCanny2 = cv2.Canny(imgBlur2, 400, 500) cv2.imshow("O", imgCanny) # 匹配拼圖 result = cv2.matchTemplate(imgCanny, imgCanny2, cv2.TM_CCOEFF_NORMED) # 歸一化 cv2.normalize(result, result, 0, 1, cv2.NORM_MINMAX, -1) min_val, max_val, min_loc, max_loc = cv2.minMaxLoc(result) print('min_loc:', min_loc) print('max_loc:', max_loc) # 匹配后結(jié)果畫圈 cv2.rectangle(imgContour, max_loc, (max_loc[0] + 135, max_loc[1] + 135), (0, 0, 255), 2) # 原圖為680*390 在瀏覽器resize為280*161,這里我們只用到寬。所以需要進行同比例縮放。 res = min_loc[0] / (680 / 280) cv2.imshow("Canny Image", imgContour) #這里不可以用0,因為圖片窗口會一直顯示,程序卡住無法return出距離給滑塊功能使用。 cv2.waitKey(100) print('應滑動距離獲取成功。') return res if __name__ == '__main__': get_image()
下面是運行結(jié)果,兩種不同的驗證碼背景圖都可以正確識別出來。紅框為代碼識別缺口之后標記的紅框
可以看到在跳出驗證碼之后,我們的程序正確的識別到了缺口的位置,并且正確的返回了縮放后的距離。模擬的鼠標事件完美的把滑塊拖動到了缺口的位置。提示我們驗證成功,不過我們并沒有給代碼正確的賬號和密碼因此會提醒我們賬號或密碼錯誤。大家只需填入正確的賬號密碼即可成功登入。非常的好用~
需要注意一個問題,就是要保持網(wǎng)絡的穩(wěn)定,不要有太大波動。長時間加載不出來頁面元素,就會出現(xiàn)獲取不到頁面元素的報錯。
所有可能遇到的問題,我都在代碼注釋中寫了出來,非常詳細。隔壁老大爺看了之后都說好。
那么本期文章到這里就結(jié)束了,后續(xù)有什么問題可以私信我或者在評論區(qū)滴滴我嗷~
給大家比個心嗷!
到此這篇關(guān)于python+opencv+selenium自動化登錄郵箱并解決滑動驗證的問題的文章就介紹到這了,更多相關(guān)python selenium滑動驗證內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
python使用 request 發(fā)送表單數(shù)據(jù)操作示例
這篇文章主要介紹了python使用 request 發(fā)送表單數(shù)據(jù)操作,結(jié)合實例形式分析了Python基于requests模塊的表單數(shù)據(jù)發(fā)送操作相關(guān)實現(xiàn)技巧,需要的朋友可以參考下2019-09-09python?scapy抓包獲取udp并轉(zhuǎn)發(fā)的操作步驟
這篇文章主要介紹了python?scapy抓包獲取udp并轉(zhuǎn)發(fā)的操作步驟,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友參考下吧2024-01-01制作Python數(shù)字華容道的實現(xiàn)(可選擇關(guān)卡)
這篇文章主要介紹了制作Python數(shù)字華容道的實現(xiàn)(可選擇關(guān)卡),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2021-04-04