python requests抓取one推送文字和圖片代碼實例
這篇文章主要介紹了python requests抓取one推送文字和圖片代碼實例,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下
requests是Python中一個第三方庫,基于 urllib,采用 Apache2 Licensed 開源協(xié)議的 HTTP 庫。它比 urllib 更加方便,可以節(jié)約我們大量的工作,完全滿足 HTTP 測試需求。接下來將記錄一下requests的使用:
from bs4 import BeautifulSoup from lxml import html import xml import requests #下載圖片函數(shù) def download_img(url,name): """" 下載指定url的圖片 url:圖片的url; name:保存圖片的名字 """ try: respone = requests.get(url) f_img = respone.content path = r'C:\Users\86131\Desktop\itchat\send_file\images\\%s.jpg'%(name) with open(path, "wb")as f: f.write(f_img) except Exception as e: print("---------地址出錯------------") url_list = [] f = requests.get("http://wufazhuce.com/") # #打印網(wǎng)頁內(nèi)容 # print(f.content.decode()) soup = BeautifulSoup(f.content,"lxml") try: first_div = soup.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'carousel-inner'}) a_all = first_div.find_all('a') for i in a_all: url_list.append(i.attrs['href']) except Exception as e: print("---------出錯------------") #得到one的首頁推薦頁面 f_1 = requests.get(url_list[0]) #打印網(wǎng)頁內(nèi)容 # print(f_1.content.decode()) soup_1 = BeautifulSoup(f_1.content,"lxml") try: second_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-cita-wrapper'}) third_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-imagen'}) #獲得時期值 now_month = second_div.find('p',attrs={'class':'may'}).text now_one_day = second_div.find('p',attrs={'class':'dom'}).text #獲得圖片的url img_url = third_div.find('img').attrs['src'] #獲得一段話并去除開頭的空格 one_text = second_div.find("div",attrs={'class':'one-cita'}).text.strip() #將獲得日期拼接 now_day = now_one_day +' '+ now_month #調(diào)用函數(shù)下載圖片 download_img(img_url, now_day) except Exception as e: print("---------出錯------------")
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
- Python中使用aiohttp模擬服務器出現(xiàn)錯誤問題及解決方法
- Python requests及aiohttp速度對比代碼實例
- Python aiohttp百萬并發(fā)極限測試實例分析
- python aiohttp的使用詳解
- Python中利用aiohttp制作異步爬蟲及簡單應用
- Python中asyncio與aiohttp入門教程
- Python爬蟲抓取指定網(wǎng)頁圖片代碼實例
- Python3簡單爬蟲抓取網(wǎng)頁圖片代碼實例
- Python使用爬蟲抓取美女圖片并保存到本地的方法【測試可用】
- Python爬蟲實現(xiàn)抓取京東店鋪信息及下載圖片功能示例
- Python爬蟲之網(wǎng)頁圖片抓取的方法
- python抓取網(wǎng)站的圖片并下載到本地的方法
- python 基于AioHttp 異步抓取火星圖片
相關(guān)文章
Python內(nèi)置方法和屬性應用:反射和單例(推薦)
這篇文章主要介紹了Python內(nèi)置方法和屬性應用:反射和單例,本文通過實例代碼給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-06-06python實現(xiàn)將元祖轉(zhuǎn)換成數(shù)組的方法
這篇文章主要介紹了python實現(xiàn)將元祖轉(zhuǎn)換成數(shù)組的方法,涉及Python中l(wèi)ist方法的使用技巧,需要的朋友可以參考下2015-05-05Python3內(nèi)置模塊pprint讓打印比print更美觀詳解
這篇文章主要給大家介紹了關(guān)于Python3內(nèi)置模塊pprint讓打印比print更美觀的相關(guān)資料,文中通過示例代碼介紹的非常詳細,對大家學習或者使用Python3具有一定的參考學習價值,需要的朋友們下面來一起學習學習吧2019-06-06詳解python使用canvas實現(xiàn)移動并綁定鍵盤
這篇文章主要為大家介紹了python使用canvas實現(xiàn)移動并綁定鍵盤,具有一定的參考價值,感興趣的小伙伴們可以參考一下,希望能夠給你帶來幫助2021-12-12