python如何抓取京東小米8手機配置信息

這篇文章給大家分享的是有關(guān)python如何抓取京東小米8手機配置信息的內(nèi)容。小編覺得挺實用的，因此分享給大家做個參考，一起跟隨小編過來看看吧。

首先找到小米8商品的鏈接：https://item.jd.com/7437788.html

然后找到其配置信息的標簽，我們找到其配置信息的標簽為 <div  class="Ptable"> 

然后再分析其配置信息的頁面的規(guī)律，我們發(fā)現(xiàn)都是dl中包含了dt和dd，而一個dt對應(yīng)的一個dd，dt對應(yīng)的是參數(shù)，dd對應(yīng)的是參數(shù)具體的值

下面是源代碼

import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
 
 
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
 
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的標簽
 
data=DataFrame(columns=["參數(shù)","值"])   #定義一個二元的DataFrame
dls=divSoup.find_all("dl")
 
for dl in dls:
  dts=dl.find_all("dt")
  dds=dl.find_all("dd")
  if len(dts)==len(dds):
    for i in range(len(dts)):
      f=dts[i].getText();
      p=dds[i].getText();
      data=data.append(Series([f,p],index=["參數(shù)","值"]),ignore_index=True);
print(data)

這是最終抓取到的配置信息，一共有64行，這里我就不一一列舉出來了 

感謝各位的閱讀！關(guān)于“python如何抓取京東小米8手機配置信息”這篇文章就分享到這里了，希望以上內(nèi)容可以對大家有一定的幫助，讓大家可以學(xué)到更多知識，如果覺得文章不錯，可以把它分享出去讓更多的人看到吧！