1. 程式人生 > >Anaconda安裝以及scrapy框架和scrapyd的安裝

Anaconda安裝以及scrapy框架和scrapyd的安裝

直接 好用 希望 說了 install 自動 blog 爬蟲 點擊

把學到的分享到自己的隨筆之中~希望能幫助到各位新入駐的小白和以後的自己。

這兩天我的老師偶爾提到了Anaconda的框架~就帶大家來安裝一下~

首先我們需要再網上下載一個Anaconda的安裝包,網址是:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/(這是清華鏡像非常好用,建議不要下載最新版本)

找到對應的版本下載,完事之後直接安裝。直接按照默認配置點擊下一步

技術分享圖片在此建議全部勾選,然後進行安裝。

安裝成功之後,添加對應的環境變量(環境變量的設置就不多說了)

技術分享圖片

然後用cmd命令窗口來測試一下(輸入conda list 這條命令來查看Anaconda自帶的科學包 ,有東西就說明安裝成功)

技術分享圖片

接下來再安裝一下scrapy框架()

技術分享圖片

技術分享圖片

因為我已經安裝過了,所以就是這樣(當初我忘了這條命令,讓我經歷了一段非常難忘的時間。)

就這樣簡單的Anaconda和scrapy框架就安裝成功了,來測試下成果把, 找個目錄文件下按這shift鍵點擊右鍵 選中在 此次打開命令窗口

技術分享圖片

這樣就創建了一個名為pachong的項目 doutu 為爬蟲名,後面緊跟的就是網址。這樣就好啦~然後再開發軟件進行代碼操作啦!

接下來再來安裝scrapyd框架(小夥伴點點關註,給小弟安排一下)

首先打開cmd命令窗口~輸入命令: pip install scrapyd   ,系統會自動安裝輔助scrapyd及依賴組件。

然後輸入scrapyd 來看一下(出現6800就表示成功)

技術分享圖片

保留cmd命令窗口 然後再網頁 搜索 http://127.0.0.1:6800/(如果出現一下內容就表示成功)

技術分享圖片

在此小弟一陣手酸,剛好到了放學時間,如果像了解詳細參考以下鏈接:

https://www.cnblogs.com/zhongtang/p/5634545.html

            也謝謝各位小哥哥小姐姐能不耐其煩的看到這裏,在此小弟也在此麻煩各位點點關註(給小弟安排的明明白白的)

Anaconda安裝以及scrapy框架和scrapyd的安裝