溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

使用selenium與xpath怎么獲取指定位置的元素

發(fā)布時間:2021-01-26 14:09:20 來源:億速云 閱讀:244 作者:Leah 欄目:開發(fā)技術(shù)

使用selenium與xpath怎么獲取指定位置的元素?針對這個問題,這篇文章詳細(xì)介紹了相對應(yīng)的分析和解答,希望可以幫助更多想解決這個問題的小伙伴找到更簡單易行的方法。

i.find_element_by_xpath('./a/@href')

但你再selenium里面這樣寫會報錯,所以要改成這樣

i.find_element_by_xpath('./a').get_attribute('href')

這樣方可正確

這是一個小案例,關(guān)于爬取b站音樂視頻,但我的技術(shù)水平有限,無法下載,找不到那個東東

大家如果知道如何下載可以在評論區(qū)留言,嘿嘿

import requests
from selenium.webdriver import Chrome,ChromeOptions
#后面越來越多喜歡用函數(shù)來實(shí)現(xiàn)了
def get_webhot():  #熱搜函數(shù)
  headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36'
  }
  url ="https://www.bilibili.com/" # 微博的地址

  res = requests.get(url)
  #這個就是再后臺上面運(yùn)行那個瀏覽器,不在表面上占用你的
  option = ChromeOptions()
  option.add_argument('--headless')
  option.add_argument("--no-sandbox")
  #這里也要輸入
  browser = Chrome(options=option)
  browser.get(url)
  #解析那個web熱搜前,按住ctrl+f會在下面出現(xiàn)一個框框,然后改就完事
  browser.find_element_by_xpath('//*[@id="primaryChannelMenu"]/span[3]/div/a/span').click()
  c = browser.find_elements_by_xpath('//*[@id="high_energy"]/div[1]/div[2]/div')
  for i in c:
    #這里一定要注意,在selenium中不能像xpath那樣寫('./a/@href')來獲取指定的位置,要報錯,只能這么獲取,查了很久
    detail_url = i.find_element_by_xpath('./a').get_attribute('href')
    name = i.find_element_by_xpath('./a/p').get_attribute('title')
    detail_page_text = requests.get(url=detail_url,headers = headers).text
    print(detail_url,name)
#運(yùn)行完事
get_webhot()

這是這個結(jié)果

使用selenium與xpath怎么獲取指定位置的元素

關(guān)于使用selenium與xpath怎么獲取指定位置的元素問題的解答就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,如果你還有很多疑惑沒有解開,可以關(guān)注億速云行業(yè)資訊頻道了解更多相關(guān)知識。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI