使用Python更換外網(wǎng)IP的方法
在進(jìn)行數(shù)據(jù)抓取時(shí),經(jīng)常會(huì)遇到IP被限制的情況,常見的解決方案是搭建代理IP池,或購買IP代理的服務(wù)。除此之外,還有一個(gè)另外的方法就是使用家里的寬帶網(wǎng)絡(luò)進(jìn)行抓取。由于家里的寬帶每次斷開重新連接時(shí)都會(huì)分配一個(gè)新的IP,所以在我們抓取數(shù)據(jù)的時(shí)候,判斷當(dāng)IP被禁掉時(shí),立即在路由器中進(jìn)行斷開重新連接操作。考慮到人工操作比較繁瑣,另外也不可能一直盯著執(zhí)行的程序,就考慮使用Python自動(dòng)多路由器進(jìn)行設(shè)置。
以下代碼為針對(duì)家里的TP-Link進(jìn)行的設(shè)置,其他路由器的設(shè)置原理也應(yīng)該一樣。
import base64, requests, time, re base_url = 'http://192.168.1.1' user = 'admin' pwd = 'password' headers = { 'Accept': '*/*', 'User-Agent': 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET4.0C; .NET4.0E)', 'Referer': base_url + '/userRpm/StatusRpm.htm', 'Cookie': 'Authorization=Basic ' + base64.b64encode((user + ':' + pwd).encode(encoding='utf-8')).decode( encoding='utf-8') } def get_ip(): url = "http://2018.ip138.com/ic.asp" r = requests.get(url) txt = r.text ip = txt[txt.find("[") + 1: txt.find("]")] return ip def get_ip_status(): url = base_url + "/userRpm/StatusRpm.htm" r = requests.get(url=url, headers=headers) pattern = re.compile('(\d+\.\d+\.\d+\.\d+)') ip = re.findall(pattern,r.text) return ip[3] def change_ip(): url = base_url + '/userRpm/StatusRpm.htm?Disconnect=%B6%CF%20%CF%DF&wan=1' requests.get(url=url, headers=headers) while True: time.sleep(5) new_ip = get_ip_status() if new_ip != '0.0.0.0': break if __name__ == "__main__": change_ip()
以上代碼已經(jīng)經(jīng)過測(cè)試,能夠正常使用。希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Python自動(dòng)化構(gòu)建工具scons使用入門筆記
這篇文章主要介紹了Python自動(dòng)化構(gòu)建工具scons使用入門筆記,本文講解了安裝scons、scons常用命令、scons使用示例等內(nèi)容,需要的朋友可以參考下2015-03-03Scrapy框架實(shí)現(xiàn)的登錄網(wǎng)站操作示例
這篇文章主要介紹了Scrapy框架實(shí)現(xiàn)的登錄網(wǎng)站操作,結(jié)合實(shí)例形式分析了Scrapy登錄網(wǎng)站cookies方式、post請(qǐng)求方式登錄網(wǎng)站相關(guān)實(shí)現(xiàn)技巧,需要的朋友可以參考下2020-02-02python實(shí)現(xiàn)m3u8格式轉(zhuǎn)換為mp4視頻格式
這篇文章主要為大家詳細(xì)介紹了python實(shí)現(xiàn)m3u8格式轉(zhuǎn)換為mp4視頻格式,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-02-02Python模擬百度自動(dòng)輸入搜索功能的實(shí)例
今天小編就為大家分享一篇Python模擬百度自動(dòng)輸入搜索功能的實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-02-02python批量制作雷達(dá)圖的實(shí)現(xiàn)方法
本文通過實(shí)例代碼介紹了如何用python批量制作雷達(dá)圖的實(shí)現(xiàn)方法,下面一起來看看如何實(shí)現(xiàn)的。2016-07-07使用python分析統(tǒng)計(jì)自己微信朋友的信息
這篇文章主要介紹了python分析統(tǒng)計(jì)自己微信朋友的信息,本文通過實(shí)例代碼給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2019-07-07