Python3.6下scrapy框架的安裝
首先考慮使用最簡單的方法安裝
pip install scrapy
命令安裝,提示
Failed building wheel for Twisted Microsoft Visual C++ 14.0 is required...
於是開始問度娘應該怎樣安裝,看了幾篇博客,雖然和我的問題不十分相同,但是也受到了啟發,知道應該怎樣解決我的問題了。解決問題的過程總結如下:
1、直接使用pip install scrapy
安裝不成功可以安裝whl格式的包
首先下載scrapy的whl包
下載地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/
在網頁中搜索scrapy找到Scrapy?1.3.3?py2.py3?none?any.whl
2、安裝whl格式包需要安裝wheel庫
看到別人的博客上說可以直接使用pip install wheel
安裝wheel,由於我已經安裝過wheel了,在這裏就不用安裝了,就沒有測試怎麽安裝wheel。
沒有安裝過wheel庫的請先安裝。
3、scrapy依賴twiste,同樣使用whl格式的包進行安裝
還是進入http://www.lfd.uci.edu/~gohlke/pythonlibs/,在網頁中搜索twisted找到其對應的whl包並下載
- Twisted?17.1.0?cp36?cp36m?win_amd64.whl
根據你的Python的版本選擇合適的包,名稱中間的cp36是python3.6的意思,amd64是python的位數
下載完成後使用cmd打開windows的命令行窗口,進入whl包所在的文件夾執行如下命令
pip install [whl]
[whl]是whl包的名字,即:
pip install Twisted-17.1.0-cp36-cp36m-win_amd64.whl
Scrapy-1.3.3-py2.py3-none-any.whl包使用同樣的方式安裝,只是應該等到其所有依賴的包安裝完成後才能進行安裝,現在還不能安裝
4、scrapy依賴lxml包,需要先安裝lxml包,lxml包依賴libxml2,libxml2-devel,所以安裝lxmllibxml2, libxml2-devel。幸運的是之前我之前已經安裝過lxml
5、所有準備工作做完,終於可以安裝scrapy包了,進入Scrapy-1.3.3-py2.py3-none-any.whl所在的目錄
pip install Scrapy-1.3.3-py2.py3-none-any.whl
Successfully ! 先別急著撒花,是否真的安裝成功了,還需要驗證,輸入scrapy -h
顯示scrapy的相關信息,大功告成,撒花~~~
Python3.6下scrapy框架的安裝