1. 程式人生 > >Python爬取貼吧多頁圖片

Python爬取貼吧多頁圖片

Python爬取貼吧圖片都只能爬取第一頁的,加了迴圈也不行,現在可以了。

#coding:utf-8
import urllib
import urllib2
import re
import os

# 將正則表示式編譯成Pattern物件
rex=r'src="(http://imgsrc.baidu.com/forum/w%3D580.*?\.jpg)"';

root = "D:\\tupian\\"
for page in range(1,3):
    pageurl = "http://tieba.baidu.com/p/3710495592?pn="+str(page);
    Response=urllib2.urlopen(pageurl);
    Html=Response.read();
    lists = re.findall(rex, Html);
    lensofpage=len(lists);
    print lensofpage;
    
    picname = 'pic' + str(page);
    print picname;
    x=1;
    for picurl in lists:
        if not os.path.exists(root+picname):
            os.mkdir(root+picname)
        urllib.urlretrieve(picurl,root+'%s\%s.jpg' % (picname,x));
        #print str(page)+picurl;
        print ".",
        x=x+1;