python爬蟲的數(shù)據(jù)庫連接問題【推薦】
1.需要導(dǎo)的包
import pymysql
2.# mysql連接信息(字典形式)
db_config ={ 'host': '127.0.0.1',#連接的主機id(107.0.0.1是本機id) 'port': 3306, 'user': '****', 'password': '****', 'db': 'test',#(數(shù)據(jù)庫名) 'charset': 'utf8' }
3.# 獲得數(shù)據(jù)庫連接
connection = pymysql.connect(**db_config)
connection()具體的基礎(chǔ)知識詳見連接
http://www.dbjr.com.cn/article/142550.htm
4.具體連接(以簡書為例)
try: # 獲得數(shù)據(jù)庫游標(biāo)(游標(biāo)提供了一種對從表中檢索出的數(shù)據(jù)進行操作的靈活手段,就本質(zhì)而言,游標(biāo)實際上是一種能從包括多條數(shù)據(jù)記錄的結(jié)果集中每次提取一條記錄的機制。游標(biāo)總是與一條SQL 選擇語句相關(guān)聯(lián)因為游標(biāo)由結(jié)果集(可以是零條、一條或由相關(guān)的選擇語句檢索出的多條記錄)和結(jié)果集中指向特定記錄的游標(biāo)位置組成。) with connection.cursor() as cursor: sql = 'insert into simplebook(title, url) values(%s, %s)' for u in urls: # 執(zhí)行sql語句 cursor.execute(sql, (u.string, r'http://www.jianshu.com'+u.attrs['href'])) # 事務(wù)提交 connection.commit() finally: # 關(guān)閉數(shù)據(jù)庫連接 connection.close()
5.連接數(shù)據(jù)庫成功,并得到數(shù)據(jù)
總結(jié)
以上所述是小編給大家介紹的python爬蟲的數(shù)據(jù)庫連接問題,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
相關(guān)文章
Python接口自動化淺析如何處理動態(tài)數(shù)據(jù)
本文是python接口自動化系列文章,主要介紹了接口自動化過程中,動態(tài)數(shù)據(jù)如何生成、動態(tài)數(shù)據(jù)與數(shù)據(jù)庫數(shù)據(jù)進行對比并替換,有需要的朋友可以參考下2021-08-08Python 圖片文字識別的實現(xiàn)之PaddleOCR
OCR方向的工程師,之前一定聽說過PaddleOCR這個項目,其主要推薦的PP-OCR算法更是被國內(nèi)外企業(yè)開發(fā)者廣泛應(yīng)用,短短半年時間,累計Star數(shù)量已超過15k,頻頻登上Github Trending和Paperswithcode 日榜月榜第一2021-11-11Python?JMESPath庫輕松操作JSON進行數(shù)據(jù)查詢方法實例
這篇文章主要為大家介紹了Python?JMESPath庫輕松操作JSON方法實例,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2024-01-01Python標(biāo)準庫學(xué)習(xí)之operator.itemgetter函數(shù)的使用
operator.itemgetter是Python標(biāo)準庫operator模塊中的一個函數(shù),本文主要介紹了Python標(biāo)準庫學(xué)習(xí)之operator.itemgetter函數(shù)的使用,具有一定的參考價值,感興趣的可以了解一下2024-07-07