Python爬蟲包BeautifulSoup異常處理（二）

發(fā)布時(shí)間：2020-09-05 18:31:43 來源：腳本之家閱讀：185 作者：SuPhoebe 欄目：開發(fā)技術(shù)

面對(duì)網(wǎng)絡(luò)不穩(wěn)定，頁(yè)面更新等問題，很可能出現(xiàn)程序異常的問題，所以我們要對(duì)程序進(jìn)行一些異常處理。大家可能覺得處理異常是一個(gè)比較麻煩的活，但在面對(duì)復(fù)雜網(wǎng)頁(yè)和任務(wù)的時(shí)候，無(wú)疑成為一個(gè)很好的代碼習(xí)慣。

網(wǎng)頁(yè)‘404'、‘500'等問題

try:
    html = urlopen('http://www.pmcaff.com/2221')
  except HTTPError as e:
    print(e)

返回的是空網(wǎng)頁(yè)

if html is None:
    print('沒有找到網(wǎng)頁(yè)')

目標(biāo)標(biāo)簽在網(wǎng)頁(yè)中缺失

try:
    #不存在的標(biāo)簽
    content = bsObj.nonExistingTag.anotherTag 
  except AttributeError as e:
    print('沒有找到你想要的標(biāo)簽')
  else:
    if content == None:
      print('沒有找到你想要的標(biāo)簽')
    else:
      print(content)

實(shí)例

if sys.version_info[0] == 2:
  from urllib2 import urlopen # Python 2
  from urllib2 import HTTPError
else:
  from urllib.request import urlopen # Python3
  from urllib.error import HTTPError
from bs4 import BeautifulSoup
import sys


def getTitle(url):
  try:
    html = urlopen(url)
  except HTTPError as e:
    print(e)
    return None
  try:
    bsObj = BeautifulSoup(html.read())
    title = bsObj.body.h2
  except AttributeError as e:
    return None
  return title

title = getTitle("http://www.pythonscraping.com/exercises/exercise1.html")
if title == None:
  print("Title could not be found")
else:
  print(title)

以上全部為本篇文章的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持億速云。

向AI問一下細(xì)節(jié)

Python爬蟲包BeautifulSoup異常處理（二）

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標(biāo)簽