欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python采集圖片數據的實現示例

 更新時間:2023年04月26日 09:14:57   作者:極客飛虎  
本文主要介紹了Python采集圖片數據的實現示例,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧

前言:

在網絡時代,圖片已經成為了我們生活中不可或缺的一部分。隨著各種社交媒體的興起,我們可以在網上看到越來越多的圖片,但是如何從這些圖片中獲取有價值的信息,如何從中提取有用的知識,卻是一個需要我們思考和探索的問題。本文將介紹如何采集某個網站的圖片,并從中獲取有用的信息和知識。

發(fā)送請求

1682337612463.png

我們首先確定網址,我們先使用開發(fā)者工具,定位到我們要的數據。發(fā)現,內容就在網頁源代碼中。

url = 'https://www.hexuexiao.cn/tj/WuJiayi/'

res = requests.get(url)

# print(res.text)
html_url = re.findall('<a  rel="external nofollow"  >',res.text,re.S)
urls = sorted(list(set(html_url)), key=html_url.index)

我們這里html_url 變量的值是一個正則表達式對象,用于匹配網站圖片的鏈接。代碼塊 list(set(html_url)) 將列表對象轉換為集合對象,使用 set() 方法將列表對象轉換為集合對象,這是一個將列表中的元素轉換為集合的方法。html_url.index 是一個整數對象,表示 html_url中各元素在原始 HTML 字符串中出現的次數,以此來實現排序。

保存數據

for url1 in urls:
    for page in range(0,10):
        url2 = f'https://www.hexuexiao.cn/a/{url1}-{page}.html'
        # print(url2)
        res1 = requests.get(url2)
        # print(res1.text)
        url3 = re.findall('<img src=(.*?)/></a>',res1.text,re.S)[0]
        print(url3)
        url3=re.sub('',"",url3)
        print(url3)
       

我們這段代碼中的 urls 列表是一個字典,其中鍵是 URL,值是頁碼。在循環(huán)中,我們使用 range() 函數從 0 到 9 迭代頁碼。接下來,我們使用 requests.get() 方法分別獲取每個頁面的 HTML 代碼,并使用正則表達式匹配出所有的圖片鏈接。最后,我們使用 requests.get() 方法獲取每個圖片鏈接的內容,并將其寫入一個文件中。

保存圖片

 content = requests.get(url3).content
        with open('圖片\' + str(num) + '.jpg', mode='wb') as f:
            f.write(content)

我們這段代碼中的 content 變量的值是從圖片鏈接 url3 中獲取的內容。然后,使用 with open() 語句打開一個二進制文件,并將 content 寫入文件中。在這個過程中,num 變量的值是當前文件中的圖片序號。獲取圖片和我們之前獲取音頻一樣,都是保存成二進制文件。

這樣,我們的圖片數據就保存下來了。這里,我就不展示效果了,原理都是一樣的,找到圖片的地址,我們就可以獲取下來。

總結:

python采集圖片是一項非常重要的任務,它可以幫助我們從海量的信息中提取有用的信息和知識。在本文中,我們將介紹如何采集某個網站的圖片,并從中獲取有用的信息和知識。首先,我們需要明確自己的目的和需求,選擇適合自己的采集方式和策略。其次,我們需要學會使用各種工具和方法,包括搜索引擎、瀏覽器插件、圖片處理工具等,來獲取圖片。在處理圖片時,我們需要注意保證圖片的質量和清晰度,避免出現模糊、失真等問題。最后,我們需要總結經驗教訓,不斷改進自己的采集方式和策略,提高采集效率和質量。

到此這篇關于Python采集圖片數據的實現示例的文章就介紹到這了,更多相關Python采集圖片數據內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!

相關文章

  • Python json轉字典字符方法實例解析

    Python json轉字典字符方法實例解析

    這篇文章主要介紹了Python json轉字典字符代碼實例解析,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下
    2020-04-04
  • Python腳本簡單實現打開默認瀏覽器登錄人人和打開QQ的方法

    Python腳本簡單實現打開默認瀏覽器登錄人人和打開QQ的方法

    這篇文章主要介紹了Python腳本簡單實現打開默認瀏覽器登錄人人和打開QQ的方法,涉及Python針對瀏覽器及應用程序的相關操作技巧,代碼非常簡單實用,需要的朋友可以參考下
    2016-04-04
  • python中defaultdict方法的使用詳解

    python中defaultdict方法的使用詳解

    這篇文章主要介紹了python中defaultdict方法的使用,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2023-04-04
  • Pytest之測試命名規(guī)則的使用

    Pytest之測試命名規(guī)則的使用

    這篇文章主要介紹了Pytest之測試命名規(guī)則的使用,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
    2021-04-04
  • 在Django的上下文中設置變量的方法

    在Django的上下文中設置變量的方法

    這篇文章主要介紹了在Django的上下文中設置變量的方法,Django是重多Python高人氣框架中最為著名的一個,需要的朋友可以參考下
    2015-07-07
  • 修復Python?Pandas數據標記錯誤的幾種方法總結

    修復Python?Pandas數據標記錯誤的幾種方法總結

    用于分析數據的?Python?庫稱為?Pandas,在?Pandas?中讀取數據最常見的方式是通過?CSV?文件,但?CSV?文件的限制是它應該采用特定的格式,否則在標記數據時會拋出錯誤,在本文中,我們將討論修復?Python?Pandas?錯誤標記數據的各種方法
    2023-10-10
  • Python語法概念基礎詳解

    Python語法概念基礎詳解

    這篇文章主要為大家介紹了Python語法概念基礎,具有一定的參考價值,感興趣的小伙伴們可以參考一下,希望能夠給你帶來幫助
    2022-01-01
  • Python制作一個隨機抽獎小工具的實現

    Python制作一個隨機抽獎小工具的實現

    最近在工作中面向社群玩家組織了一場活動,需要進行隨機抽獎,就做了一個簡單的隨機抽獎小工具。具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2021-07-07
  • Python+Opencv識別兩張相似圖片

    Python+Opencv識別兩張相似圖片

    python的功能實在太強大,這篇文章主要介紹了Python+Opencv識別兩張相似圖片的相關資料,文中利用Opencv庫進行了更簡潔化的實現,感興趣的小伙伴們可以參考一下
    2016-04-04
  • python 多線程對post請求服務器測試并發(fā)的方法

    python 多線程對post請求服務器測試并發(fā)的方法

    今天小編就為大家分享一篇python 多線程對post請求服務器測試并發(fā)的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2019-06-06

最新評論