1. 程式人生 > >Python題目4:爬取電影

Python題目4:爬取電影

sts pip pytho 靜態網頁 下載 返回 link 編碼格式 模塊

import re # 正則表達式,用於提取數據
import requests  # 下載網頁源代碼
‘‘‘
安裝requests模塊:pip install requests
參考文檔:https://www.cnblogs.com/jamespan23/p/5526311.html
‘‘‘
for m in range(1,5):
    url = ‘http://www.dytt8.net/html/gndy/dyzz/list_23_‘+str(m)+‘.html‘
    html = requests.get(url) #  使用靜態網頁
    html.encoding = ‘GB2312‘ # 指定編碼格式,通過查看網頁源代碼得知
    data = re.findall(‘<a href="(.*?)" class="ulink">‘,html.text)
    # 提取信息,返回列表
    # (.*?)匹配以‘<a href=‘開頭,以‘class="ulink"‘結尾的任何信息

    for n in data:
        url2 = ‘http://www.dytt8.net‘ + n
        html2 = requests.get(url2)
        html2.encoding = ‘GB2312‘
        ftp = re.findall(‘<a href="(.*?)">.*?</a></td>‘,html2.text)
        try:
            with open(r‘F:\python\mov.txt‘,‘a‘,encoding=‘UTF-8‘) as f:
            # utf-8有可能兼容,不兼容的話使用gb2312
                f.write(ftp[0]+‘\n‘) # ftp提取的都是列表,列表不能寫入文件,所以要加[0]
        except:
            print(‘這一頁不能下載‘)

  

Python題目4:爬取電影