urllib模組中常見的模組就是urllib.request模組，對於這個模組我會深入講解一下，因為Python3.3.0之後，它的用法有了一個變化，在開發的過程中需要大家注意：

The urllib.request module defines functions and classes which help in opening URLs (mostly HTTP) in a complex world — basic and digest authentication, redirections, cookies and more.

官方對urllib.request的定位是：幫助在複雜的世界中開啟URL（主要是HTTP）的函式和類——基本和摘要身份驗證、重定向、cookie等等。

定義中提到“主要是HTTP”，目前只有一下協議：支援HTTP、FTP、本地檔案和資料的URL，所以對於HTTPS的請求，我們放在其他文章中去講解。

urllib.request模組預設定義了一下幾個函式：

urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)

這個函式主要用來開啟一個url，url可以是一個字串，也可以是一個請求物件；

這個函式總是返回一下可以作為上下文的方法：

getURL()--返回檢索的資源的URL，通常用於確定是否遵循重定向；

info()--返回頁面的元資訊；

getcode()--返回響應的HTTP狀態程式碼；

read()--返回頁面元素。

程式碼如下：

import urllib.request
page=urllib.request.urlopen("http://www.zhihu.com/")
print(page.info())
print(page.getURL())
print(page.getcode())
print(page.read())

兩個函式主要用於設定代理，這個不用多說，大家在做爬蟲的時候，多少都會用到代理IP的，程式碼如下：

步驟多為：（1）、準備代理IP或者請求頭；

（2）、利用urllib.request.build_opener()封裝代理IP或請求頭；

（3）、利用urllib.request.instanll_opener()安裝成全域性；

（4）、用urlopen()訪問網頁.

import urllib.request
proxy_support = urllib.request.ProxyHandler({'sock5': 'localhost:1080'})
opener = urllib.request.build_opener(proxy_support)
urllib.request.install_opener(opener)
 
a = urllib.request.urlopen("http://www.zhihu.com/ ").read().decode("utf8")
print(a)

這兩個函式暫時還沒研究透，就不拿出來給大家了

urllib.request.getproxies()

這個幫助函式講一個scheme的字典返回給代理伺服器URL對映。

以下是從python2中移植的函式，官方文件上說，他們可能在未來的某個時間變得過時：

urllib.request.urlretrieve(url, filename=None, reporthook=None, data=None)

這個函式大家做爬蟲，特別是爬網頁的時候，應該是用的最多的，作用是講一個URL訪問的網路物件複製到本地，第二個引數用於制定本地檔案位置；

def getImage(html):
    reg=r'src="(.+?\.jpg)"'#正則表示式
    imgre=re.compile(reg)#將正則表示式編譯成一個正則表示式物件
    html = html.decode('utf-8')#python3中使用
    # imglist=reg.findall(imgre,html)
    imglist=re.findall(imgre,html)
    x=0
    for imgurl in imglist:
        urllib.request.urlretrieve(imgurl,'H:\picture\%s.jpg' %x)
        x += 1

urllib.request.urlcleanup()


這個函式用於清理之前呼叫urlretrieve（）函式留下的臨時檔案。

這個子模組的函式介紹常用的就這麼多，以後會挑個時間對這個子模組的類進行分析。