python抓取京東小米8手機配置信息
更新時間：2018年11月13日 15:39:34 作者：謝公子
這篇文章主要為大家詳細介紹了python抓取京東手機配置信息，具有一定的參考價值，感興趣的小伙伴們可以參考一下
本文代碼是使用python抓取京東小米8手機的配置信息
首先找到小米8商品的鏈接：https://item.jd.com/7437788.html
然后找到其配置信息的標簽，我們找到其配置信息的標簽為 <div class="Ptable">
然后再分析其配置信息的頁面的規(guī)律，我們發(fā)現(xiàn)都是dl中包含了dt和dd，而一個dt對應(yīng)的一個dd，dt對應(yīng)的是參數(shù)，dd對應(yīng)的是參數(shù)具體的值
下面是源代碼
import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的標簽
data=DataFrame(columns=["參數(shù)","值"]) #定義一個二元的DataFrame
dls=divSoup.find_all("dl")
for dl in dls:
dts=dl.find_all("dt")
dds=dl.find_all("dd")
if len(dts)==len(dds):
for i in range(len(dts)):
f=dts[i].getText();
p=dds[i].getText();
data=data.append(Series([f,p],index=["參數(shù)","值"]),ignore_index=True);
print(data)
這是最終抓取到的配置信息，一共有64行，這里我就不一一列舉出來了
以上就是本文的全部內(nèi)容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
下面小編就為大家?guī)硪黄焖偃腴Tpython的題目詳解小編覺得挺不錯的，現(xiàn)在就分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2021-11-11
本文主要介紹了pycharm配置Qt?Designer工具的圖文教程，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2023-06-06
對Python Class之間函數(shù)的調(diào)用關(guān)系詳解
今天小編就為大家分享一篇對Python Class之間函數(shù)的調(diào)用關(guān)系詳解，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-01-01
這篇文章主要介紹了keras處理欠擬合和過擬合的實例講解，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-05-05
這篇文章主要介紹了如何基于Python創(chuàng)建目錄文件夾,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-12-12
python射線法判斷一個點在圖形區(qū)域內(nèi)外
這篇文章主要為大家詳細介紹了python射線法判斷一個點在圖形區(qū)域內(nèi)外，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-06-06
讀萬卷書不如行萬里路，只學書上的理論是遠遠不夠的，只有在實戰(zhàn)中才能獲得能力的提升，本篇文章手把手帶你用Python爬取熱火的魷魚游戲評價,大家可以在過程中查缺補漏，提升水平2021-10-10
pytorch的backward()的底層實現(xiàn)邏輯詳解
自動微分是一種計算張量（tensors）的梯度（gradients）的技術(shù),它在深度學習中非常有用,這篇文章主要介紹了pytorch的backward()的底層實現(xiàn)邏輯,需要的朋友可以參考下2023-11-11
這篇文章主要介紹了Python深入學習之裝飾器,裝飾器(decorator)是一種高級Python語法,本文全面介紹了Python中的裝飾器,需要的朋友可以參考下2014-08-08
眾所周知，python之所以很方便在一定程度上是因為隨時都可能有人又創(chuàng)作了一個好用又方便的python非標準庫。本文就來用Python實現(xiàn)對字符串中字符進行提取校驗，需要的可以參考一下2022-10-10