用python自帶的urllib庫能寫一些簡單的爬蟲，這裡給大家推薦一個牛逼的框架，叫做scrapy，但是這個東東安裝起來難受的要死，昨天整了一天才弄好。。。。。。

首先，你要在電腦上安裝python（這個怎麼安裝我就不說了，這個不會安裝，就不用學了。。。。。）

第一步：在你的cmd中輸入 pip3 install scrapy

百分之百報錯，哈哈，先坑你們一下

第二步：安裝lxml

pip3 install lxml

第三步：安裝pywin32

這個東東去網站自行下載就行 一定要找對版本號。。。。。

第四部：安裝twisted

這個網站最好用EDGE或者IE瀏覽器開啟。。。。。。

一定要找準版本號我用的是這個 Twisted-18.4.0-cp36-cp36m-win_amd64.whl

36代表python3.6版本呢  64指的是電腦是64位的

安裝twisted的時候，有可能會報錯，我遇到的錯誤是超時了，前面得加上

 pip3 --default-timeout=100  install -u C：/python/ Twisted-18.4.0-cp36-cp36m-win_amd64.whl

第五步：安裝scrapy

pip3 install scrapy

如果安裝成功了，一定要重啟cmd，在cmd中輸入scrapy，如果出現下圖的東東，那麼恭喜你，安裝成功。