1. 程式人生 > >自己動手編寫一個網絡圖片爬蟲

自己動手編寫一個網絡圖片爬蟲

網絡 浪費 原理 get 應用 crawl 方法 網絡圖 理解

如今基本上我們的大部分時間都是浪費在瀏覽網頁上的,網頁有許多的媒體資源,其中最常見的是圖片。當我們瀏覽到比較好的網站的時候,看到比較好看的圖片總是會忍不住要下載。通常來說我們都是右鍵單擊圖標選擇圖片另存為,選擇要保存的位置,然後保存。別這麽天真的認為你已經把一張圖片下載好了,其實不然,當你發現下載的圖片多了的時候,難免會覺得這種方法效率極其低下。而且當下載了大量圖片後還要手動進行分類,實在是麻煩至極。

這裏我要向大家推薦一種高效的下載圖片的方式——爬蟲爬取並自動下載。如果你理解了爬蟲的原理,你還可以把同樣的方法應用到視頻、音頻和文本資源的下載上。

這裏我直接推薦一個爬取圖片的小程序,有興趣的讀者可以改造這個小程序,用於爬取文章等。

小程序源碼地址:https://github.com/danielfengyu/img_crawler

希望對感興趣的人有幫助!

自己動手編寫一個網絡圖片爬蟲