Python selenium+cookie實(shí)現(xiàn)免密登陸的示例代碼
今天爬取airbnb的租房數(shù)據(jù)時(shí),遇到了登陸問(wèn)題。自己動(dòng)手解決了一下。
我們知道,http是無(wú)狀態(tài)的,那么網(wǎng)頁(yè)如何實(shí)現(xiàn)用戶登陸注冊(cè)功能呢?Session和Cookie就是為了滿足這種需求出現(xiàn)的技術(shù)。
首先介紹一下Session和Cookie的概念。
在Web中Session對(duì)象存儲(chǔ)特定用戶會(huì)話所需的屬性及配置信息。這樣,當(dāng)用戶在應(yīng)用程序的Web頁(yè)之間跳轉(zhuǎn)時(shí),存儲(chǔ)在Session對(duì)象中的變量將不會(huì)丟失,而是在整個(gè)用戶會(huì)話中一直存在下去。當(dāng)用戶請(qǐng)求來(lái)自應(yīng)用程序的 Web頁(yè)時(shí),如果該用戶還沒(méi)有會(huì)話,則Web服務(wù)器將自動(dòng)創(chuàng)建一個(gè) Session對(duì)象。當(dāng)會(huì)話過(guò)期或被放棄后,服務(wù)器將終止該會(huì)話。
Cookie,有時(shí)也用其復(fù)數(shù)形式 Cookies。類型為“小型文本文件”,是某些網(wǎng)站為了辨別用戶身份,進(jìn)行Session跟蹤而儲(chǔ)存在用戶本地終端上的數(shù)據(jù)(通常經(jīng)過(guò)加密),由用戶客戶端計(jì)算機(jī)暫時(shí)或永久保存的信息。
當(dāng)用戶第一次訪問(wèn)某個(gè)網(wǎng)頁(yè)時(shí),服務(wù)器會(huì)創(chuàng)建一個(gè)Session對(duì)象,用于存儲(chǔ)與該用戶會(huì)話的屬性以及配置信息,并且返回一個(gè)帶有set-cookie字段的響應(yīng)頭給客戶端,客戶端瀏覽器會(huì)把cookie保存到本地,下一次訪問(wèn)該網(wǎng)頁(yè)時(shí),會(huì)加上cookie。服務(wù)器通過(guò)cookie辨認(rèn)是否有用戶的Session。這樣就實(shí)現(xiàn)了用戶的登陸注冊(cè)功能,但是Session和Cookie的應(yīng)用遠(yuǎn)不及此,這里不再贅述。
那么為了實(shí)現(xiàn)免密登陸,我們需要做如下幾件事情:
獲取登陸airbnb時(shí)客戶端瀏覽器存儲(chǔ)的cookies。
把cookies寫入本地。
下次用selenium登陸airbnb時(shí),把cookies帶上。
獲取cookies:
使用selenium的get_cookies()函數(shù)來(lái)獲取cookies。
但是如何實(shí)現(xiàn)登陸呢?總得要先登陸了,才能有cookies吧?可以在代碼中加一段休眠時(shí)間,在休眠時(shí)間我們手動(dòng)完成登陸,休眠過(guò)后,再讓代碼記錄cookies即可。
import time from msedge.selenium_tools import Edge, EdgeOptions import chardet # 返回一個(gè)driver對(duì)象 def activate_selenium_driver(): options = EdgeOptions() # options.use_chromium = True options.add_experimental_option('excludeSwitches', ['enable-automation']) options.binary_location = r"C:\Program Files (x86)\Microsoft\Edge\Application\msedge.exe" # 瀏覽器的位置 driver = Edge(options=options, executable_path=r"D:\ERic\WORK\python\Spider\msedgedriver.exe") # 相應(yīng)的瀏覽器的驅(qū)動(dòng)位置 return driver def check_charset(file_path): with open(file_path, "rb") as f: data = f.read(4) charset = chardet.detect(data)['encoding'] return charset baseurl = 'https://www.airbnb.cn/s/%E6%B7%B1%E5%9C%B3/homes?refinement_paths%5B%5D=%2Fhomes¤t_tab_id=home_tab&selected_tab_id=home_tab&screen_size=large&hide_dates_and_guests_filters=false&place_id=ChIJkVLh0Aj0AzQRyYCStw1V7v0&map_toggle=false' driver = activate_selenium_driver() driver.get(baseurl) # 20秒的休眠時(shí)間以手動(dòng)完成登陸 for i in range(0, 20): print(20 - i) time.sleep(1) # 獲取cookies cookies = driver.get_cookies() # 保存到本地 with open('cookies.txt', 'w', encoding=check_charset('cookies.txt')) as f: for i in cookies: f.write(str(i)) f.write('\n')
攜帶cookies實(shí)現(xiàn)免密登陸:
baseurl = 'https://www.airbnb.cn/s/%E6%B7%B1%E5%9C%B3/homes?refinement_paths%5B%5D=%2Fhomes¤t_tab_id=home_tab&selected_tab_id=home_tab&screen_size=large&hide_dates_and_guests_filters=false&place_id=ChIJkVLh0Aj0AzQRyYCStw1V7v0&map_toggle=false' driver.get(baseurl) cookies = [] with open('cookies.txt', 'r', encoding=funcs.funcs.check_charset('cookies.txt')) as f: for i in f: cookies.append(eval(i.strip())) for i in cookies: driver.add_cookie(i) time.sleep(3) driver.refresh()
再次打開(kāi)Airbnb時(shí),發(fā)現(xiàn)已經(jīng)是登陸狀態(tài),大功告成辣。
到此這篇關(guān)于Python selenium+cookie實(shí)現(xiàn)免密登陸的示例代碼的文章就介紹到這了,更多相關(guān)selenium cookie免密登陸內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
python使用QQ郵箱實(shí)現(xiàn)自動(dòng)發(fā)送郵件
這篇文章主要為大家詳細(xì)介紹了python使用QQ郵箱實(shí)現(xiàn)自動(dòng)發(fā)送郵件,文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2020-06-06python3使用Pillow、tesseract-ocr與pytesseract模塊的圖片識(shí)別的方法
這篇文章主要介紹了python3使用Pillow、tesseract-ocr與pytesseract模塊的圖片識(shí)別的方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-02-02pygame可視化幸運(yùn)大轉(zhuǎn)盤實(shí)現(xiàn)
這篇文章主要介紹了pygame可視化幸運(yùn)大轉(zhuǎn)盤實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-04-04刪除python pandas.DataFrame 的多重index實(shí)例
今天小編就為大家分享一篇?jiǎng)h除python pandas.DataFrame 的多重index實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-06-06Python Charles抓包配置實(shí)現(xiàn)流程圖解
這篇文章主要介紹了Python Charles抓包實(shí)現(xiàn)流程圖解,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-09-09