1. 程式人生 > >Mac環境下搭建Python爬蟲環境

Mac環境下搭建Python爬蟲環境

  剛上手mac系統,想研究下python爬蟲(話說客戶端開發必須要懂爬蟲啊),剛開始覺得OS系統安裝scrapy應該比window簡單吧.....誰知道還是出了一大推問題。

  首先,我按照如下步驟安裝了python環境(安裝步驟見下圖,用homwbrew包管理工具),然後發現mac使用的是預設的2.7.10版本,此版本並沒有我下載的scrapy(brew install python  輸入會提示 it's just not linked)。於是我想移除系統自帶的2.7.10,但是又擔心root把本本弄壞。終於,在終端試了好久命令列,使用 brew link --overwrite python可以切換到homebrew上面的2.7.11版本,就可以使用2.7.11中的pip命名啦。

 sudo pip install scrapy 就可以安裝scrapy了(我是使用的mondo db,有了pip和homebrew,自己去下載吧,視覺化介面的話用robomongo)