Python3簡單爬蟲抓取網(wǎng)頁圖片代碼實例
現(xiàn)在網(wǎng)上有很多python2寫的爬蟲抓取網(wǎng)頁圖片的實例,但不適用新手(新手都使用python3環(huán)境,不兼容python2),
所以我用Python3的語法寫了一個簡單抓取網(wǎng)頁圖片的實例,希望能夠幫助到大家,并希望大家批評指正。
import urllib.request import re import os import urllib #根據(jù)給定的網(wǎng)址來獲取網(wǎng)頁詳細信息,得到的html就是網(wǎng)頁的源代碼 def getHtml(url): page = urllib.request.urlopen(url) html = page.read() return html.decode('UTF-8') def getImg(html): reg = r'src="(.+?\.jpg)" pic_ext' imgre = re.compile(reg) imglist = imgre.findall(html)#表示在整個網(wǎng)頁中過濾出所有圖片的地址,放在imglist中 x = 0 path = 'D:\\test' # 將圖片保存到D:\\test文件夾中,如果沒有test文件夾則創(chuàng)建 if not os.path.isdir(path): os.makedirs(path) paths = path+'\\' #保存在test路徑下 for imgurl in imglist: urllib.request.urlretrieve(imgurl,'{0}{1}.jpg'.format(paths,x)) #打開imglist中保存的圖片網(wǎng)址,并下載圖片保存在本地,format格式化字符串 x = x + 1 return imglist html = getHtml("http://tieba.baidu.com/p/2460150866")#獲取該網(wǎng)址網(wǎng)頁詳細信息,得到的html就是網(wǎng)頁的源代碼 print (getImg(html)) #從網(wǎng)頁源代碼中分析并下載保存圖片
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
相關文章
Python?seaborn數(shù)據(jù)可視化繪圖(直方圖,密度圖,散點圖)
這篇文章主要介紹了Python?seaborn數(shù)據(jù)可視化繪圖(直方圖,密度圖,散點圖),文章圍繞主題展開詳細的內(nèi)容介紹,具有一定的參考價值,需要的朋友可以參考一下2022-07-07Python自動化實戰(zhàn)之接口請求的實現(xiàn)
本文為大家重點介紹如何通過 python 編碼來實現(xiàn)我們的接口測試以及通過Pycharm的實際應用編寫一個簡單接口測試,感興趣的可以了解一下2022-05-05Python中的enumerate函數(shù)使用方法詳解
enumerate()是python的內(nèi)置函數(shù),適用于python2.x和python3.x,這篇文章主要給大家介紹了關于Python中的enumerate函數(shù)使用方法的相關資料,文中通過代碼介紹的非常詳細,需要的朋友可以參考下2024-06-06用python簡單實現(xiàn)mysql數(shù)據(jù)同步到ElasticSearch的教程
今天小編就為大家分享一篇用python簡單實現(xiàn)mysql數(shù)據(jù)同步到ElasticSearch的教程,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-05-05Python字典的基本用法實例分析【創(chuàng)建、增加、獲取、修改、刪除】
這篇文章主要介紹了Python字典的基本用法,結(jié)合具體實例形式分析了Python字典的創(chuàng)建、增加、獲取、修改、刪除等基本操作技巧與注意事項,需要的朋友可以參考下2019-03-03