python3判斷url鏈接是否為404的方法
更新時間:2018年08月10日 16:39:43 作者:iszzs
這篇文章主要介紹了python3判斷url鏈接是否為404的方法,具有一定的參考價值,感興趣的小伙伴們可以參考一下
本文實例為大家分享了python3判斷url鏈接是否為404的具體代碼,供大家參考,具體內(nèi)容如下
import pymysql import threading import time import urllib import requests # 打開數(shù)據(jù)庫連接 db = pymysql.connect("192.168.0.*", "username", "password", "databasename") # 使用 cursor() 方法創(chuàng)建一個游標對象 cursor cursor = db.cursor() # SQL 查詢語句 sql = "SELECT sku,url_6 FROM url_new where flag_6 is null and url_6<>'' " # 執(zhí)行SQL語句 cursor.execute(sql) # 獲取所有記錄列表 results = cursor.fetchall() num = 0 for row in results: sku = row[0] url = row[1] html = requests.head(url) # 用head方法去請求資源頭 re=html.status_code num = num + 1 print(num,re) if re == 200: sql_2 = "UPDATE url_new SET flag_6 = 0 WHERE sku = '%s'" % sku try: # 執(zhí)行SQL語句 cursor.execute(sql_2) #print(cursor.rowcount) except Exception as e: print(e) conn.rollback() if re == 404: sql_3 = "UPDATE url_new SET flag_6 = 1 WHERE sku = '%s'" % sku try: # 執(zhí)行SQL語句 cursor.execute(sql_3) print(cursor.rowcount) except Exception as e: print(e) conn.rollback() db.commit() db.close()
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
相關文章
Python參數(shù)傳遞中雙星號(**)和單星號(*)是作用
雙星號(**)和單星號(*)在參數(shù)傳遞中扮演著關鍵角色,本文主要介紹了Python參數(shù)傳遞中雙星號(**)和單星號(*)是作用,具有一定的參考價值,感興趣的可以了解一下2024-05-05python 創(chuàng)建彈出式菜單的實現(xiàn)代碼
這篇文章主要介紹了python 創(chuàng)建彈出式菜單的實現(xiàn)代碼的相關資料,需要的朋友可以參考下2017-07-07python 實現(xiàn)Flask中返回圖片流給前端展示
今天小編就為大家分享一篇python 實現(xiàn)Flask中返回圖片流給前端展示,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-01-01python爬取拉勾網(wǎng)職位數(shù)據(jù)的方法
這篇文章主要介紹了python爬取拉勾網(wǎng)職位數(shù)據(jù)的實現(xiàn)方法,非常不錯,具有參考借鑒價值,需要的朋友可以參考下2018-01-01