Python3常用的爬蟲第三方外掛有requests，urllib.request等。這裡主要介紹使用requests抓取網頁上的圖片，該方法只針對靜態網頁，不考慮js動態載入的網頁。

預備知識：

• requests模組的基本瞭解，包括get，post等方法和status_code，history等屬性。
• 熟練使用BeautifulSoup（美麗湯）進行文字定位、篩選，常用方法有find_all，select等。
• 基本的檔案流操作，如資料夾是否存在的判斷，新建資料夾等。
• requests的write下載圖片操作

操作開始：

這裡以筆趣閣（http://www.biquzi.com/）為例，抓取網頁上的小說封面。

抓圖的基本流程就是：

requests傳送網頁請求 --> 使用get獲取response --> 利用BeautifulSoup對response進行文字篩選，抓取圖片連結 ---> 新建一個圖片存放的資料夾 ---> urlretrieve下載圖片到資料夾

按F12分析網頁結構

圖片定位到的文字資訊類似於上圖紅框所示：

<img src="http://www.biquzi.com/files/article/image/0/703/703s.jpg" alt="鬥戰狂潮" width="120" height="150"> == $0

我們只關心圖片連結資訊（標紅部分），其他的資訊都要過濾掉。

下面上具體程式碼

import requests
import urllib.request
from bs4 import BeautifulSoup
import os
import time

url  = 'http://www.biquzi.com/'
headers = {'User-Agent': 'Mozilla/5.0'}
response = requests.get(url, headers=headers)  # 使用headers避免訪問受限
soup = BeautifulSoup(response.content, 'html.parser')
items = soup.find_all('img')
folder_path = './photo/'
if os.path.exists(folder_path) == False:  # 判斷資料夾是否已經存在
    os.makedirs(folder_path)  # 建立資料夾

for index,item in enumerate(items):
	if item:		
		html = requests.get(item.get('src'))   # get函式獲取圖片連結地址，requests傳送訪問請求
		img_name = folder_path + str(index + 1) +'.png'
		with open(img_name, 'wb') as file:  # 以byte形式將圖片資料寫入
			file.write(html.content)
			file.flush()
		file.close()  # 關閉檔案
		print('第%d張圖片下載完成' %(index+1))
		time.sleep(1)  # 自定義延時
print('抓取完成')