python3中安裝scrapy的方法

發(fā)布時間：2020-07-01 16:30:48 來源：億速云閱讀：112 作者：清晨欄目：編程語言

這篇文章將為大家詳細講解有關(guān)python3中安裝scrapy的方法，小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

python3安裝scrapy方法：1、“conda install scrapy”；2、先安裝Twisted再利用“pip install scrapy ”安裝。

python3中安裝scrapy的方法

Scrapy框架是目前Python中最受歡迎的爬蟲框架之一,那么我們今天就來具體了解一下Scrapy框架

什么是Scrapy框架?

Scrapy是一個快速、高層次、輕量級的屏幕抓取和web抓取的python爬蟲框架

Scrapy的用途:

Scrapy用途非常廣泛,主要用于抓取特定web站點的信息并從中提取特定結(jié)構(gòu)的數(shù)據(jù),除此之外,還可用于數(shù)據(jù)挖掘、監(jiān)測、自動化測試、信息處理和歷史片段(歷史記錄)打包等

了解完Scrapy框架后,我們就來看看怎么安裝和使用吧

安裝Scrapy

安裝方法有兩種:

1. 如果你電腦上有Anaconda的話,可以使用這種方法
windows+r >>> cmd >>> conda install scrapy >>> 回車

python3中安裝scrapy的方法

2.第二種方法使用pip安裝,不過你需要先下載Twisted插件

下載地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

(1)點擊下載地址,進入后按 ctrl+f ,搜索twisted,然后下載對應(yīng)版本

cp27:表示python2.7版本 cp36:表示python3.6版本

win32:表示W(wǎng)indows32位操作系統(tǒng)

python3中安裝scrapy的方法

(2)下載完成后進入終端,輸入pip install Twisted-18.7.0-cp36-cp36m-win32.whl

Twisted-18.7.0-cp36-cp36m-win32.whl:文件名(你下載哪個文件就輸入哪個文件的文件名,要輸入全部路徑)

安裝完成后再輸入pip install scrapy,回車

檢測scrapy安裝是否成功:在終端輸入scrapy,出現(xiàn)以下內(nèi)容就代表安裝成功

python3中安裝scrapy的方法

關(guān)于python3中安裝scrapy的方法就分享到這里了，希望以上內(nèi)容可以對大家有一定的幫助，可以學到更多知識。如果覺得文章不錯，可以把它分享出去讓更多的人看到。

向AI問一下細節(jié)

猜你喜歡