欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

python檢查URL是否正常訪問的小技巧

 更新時間:2017年02月25日 17:00:08   作者:程序猿全敏  
檢查一個URL是否正常很容易,如果檢查2000個URL,或者是大批量的URL怎么辦?這篇文章就為大家介紹了python檢查URL是否正常訪問的小技巧,具有一定的參考價值,感興趣的小伙伴們可以參考一下

今天,項目經(jīng)理問我一個問題,問我這里有2000個URL要檢查是否能正常打開,其實我是拒絕的,我知道因為要寫代碼了,正好學(xué)了點Python,一想,python處理起來容易,就選了python,開始把思路想好:

1.首先2000個URL??梢苑旁谝粋€txt文本內(nèi)
2.通過python 把內(nèi)容內(nèi)的URL一條一條放進(jìn)數(shù)組內(nèi)
3.打開一個模擬的瀏覽器,進(jìn)行訪問。
4.如果正常訪問就輸出正常,錯誤就輸出錯誤

直接簡單粗暴甩代碼。因為涉及到隱私,圖片打了碼

import urllib.request 
import time 
 
opener = urllib.request.build_opener() 
opener.addheaders = [('User-agent', 'Mozilla/49.0.2')] 
#這個是你放網(wǎng)址的文件名,改過來就可以了 
file = open('test.txt') 
lines = file.readlines() 
aa=[] 
for line in lines: 
  temp=line.replace('\n','') 
  aa.append(temp) 
print(aa) 
 
print('開始檢查:') 
for a in aa: 
  tempUrl = a 
  try : 
    opener.open(tempUrl) 
    print(tempUrl+'沒問題') 
  except urllib.error.HTTPError: 
    print(tempUrl+'=訪問頁面出錯') 
    time.sleep(2) 
  except urllib.error.URLError: 
    print(tempUrl+'=訪問頁面出錯') 
    time.sleep(2) 
  time.sleep(0.1) 

效果圖:

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。

相關(guān)文章

最新評論