利用 requests 抓取豆瓣電影 Top 250：

import re
import requests

def main(url):
    global num
    headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36"}
    req = requests.get(url, headers=headers)
    pattern = re.compile(r"
 
<span class=\"title\">(.*?)</span>", re.S)
    for name in re.findall(pattern, req.text):
        if name.startswith("&"):
            continue
        else:
            print("%s: %s" % (num, name))
            num += 1

if __name__ == ‘__main__‘:
    num = 1
    for i in range(0, 256, 25):
        url 
 
= "https://movie.douban.com/top250?start=%s&filter=" % i
        main(url)

執行結果：

1: 肖申克的救贖
2: 霸王別姬
3: 這個殺手不太冷
4: 阿甘正傳
5: 美麗人生
6: 泰坦尼克號
7: 千與千尋
8: 辛德勒的名單
9: 盜夢空間
10: 忠犬八公的故事
11: 機器人總動員
12: 三傻大鬧寶萊塢
13: 海上鋼琴師
14: 放牛班的春天
15: 楚門的世界
16: 大話西遊之大聖娶親
17: 星際穿越
18: 龍貓
19: 教父
20: 熔爐
21: 無間道
 
22: 瘋狂動物城
23: 當幸福來敲門
24: 怦然心動
25: 觸不可及
26: 亂世佳人
27: 蝙蝠俠：黑暗騎士
28: 活著
29: 少年派的奇幻漂流
30: 天堂電影院
31: 控方證人
32: 鬼子來了
33: 十二怒漢
34: 指環王3：王者無敵
35: 天空之城
36: 飛屋環遊記
37: 摔跤吧！爸爸
38: 大話西遊之月光寶盒
39: 搏擊俱樂部
40: 羅馬假日
41: 哈爾的移動城堡
42: 聞香識女人
43: 竊聽風暴
44: 辯護人
45: 兩桿大煙槍
46: 飛越瘋人院
47: 死亡詩社
48: 末代皇帝
49: 指環王2：雙塔奇兵
50: V字仇殺隊
51: 教父2
52: 素媛
53: 指環王1：魔戒再現
54: 海豚灣
55: 飲食男女
56: 美麗心靈
57: 獅子王
58: 情書
59: 尋夢環遊記
60: 鋼琴家
61: 美國往事
62: 本傑明·巴頓奇事
63: 小鞋子
64: 黑客帝國
65: 西西裏的美麗傳說
66: 看不見的客人
67: 讓子彈飛
68: 拯救大兵瑞恩
69: 致命魔術
70: 大鬧天宮
71: 七宗罪
72: 哈利·波特與魔法石
73: 被嫌棄的松子的一生
74: 音樂之聲
75: 低俗小說
76: 天使愛美麗
77: 沈默的羔羊
78: 勇敢的心
79: 剪刀手愛德華
80: 蝴蝶效應
81: 貓鼠遊戲
82: 春光乍泄
83: 心靈捕手
84: 布達佩斯大飯店
85: 禁閉島
86: 入殮師
87: 穿條紋睡衣的男孩
88: 幽靈公主
89: 阿凡達
90: 陽光燦爛的日子
91: 第六感
92: 瑪麗和馬克思
93: 致命ID
94: 狩獵
95: 重慶森林
96: 斷背山
97: 加勒比海盜
98: 摩登時代
99: 告白
100: 大魚
101: 喜劇之王
102: 一一
103: 消失的愛人
104: 射雕英雄傳之東成西就
105: 陽光姐妹淘
106: 甜蜜蜜
107: 愛在黎明破曉前
108: 小森林 夏秋篇
109: 側耳傾聽
110: 紅辣椒
111: 倩女幽魂
112: 馴龍高手
113: 恐怖直播
114: 風之谷
115: 上帝之城
116: 請以你的名字呼喚我
117: 超脫
118: 愛在日落黃昏時
119: 菊次郎的夏天
120: 幸福終點站
121: 哈利·波特與死亡聖器(下)
122: 小森林 冬春篇
123: 殺人回憶
124: 神偷奶爸
125: 借東西的小人阿莉埃蒂
126: 7號房的禮物
127: 怪獸電力公司
128: 螢火之森
129: 唐伯虎點秋香
130: 歲月神偷
131: 超能陸戰隊
132: 蝙蝠俠：黑暗騎士崛起
133: 七武士
134: 電鋸驚魂
135: 真愛至上
136: 諜影重重3
137: 瘋狂原始人
138: 螢火蟲之墓
139: 喜宴
140: 東邪西毒
141: 貧民窟的百萬富翁
142: 英雄本色
143: 黑天鵝
144: 無人知曉
145: 記憶碎片
146: 心迷宮
147: 血戰鋼鋸嶺
148: 傲慢與偏見
149: 雨人
150: 時空戀旅人
151: 荒蠻故事
152: 縱橫四海
153: 教父3
154: 盧旺達飯店
155: 玩具總動員3
156: 達拉斯買家俱樂部
157: 花樣年華
158: 完美的世界
159: 海邊的曼徹斯特
160: 海洋
161: 虎口脫險
162: 戀戀筆記本
163: 你看起來好像很好吃
164: 被解救的姜戈
165: 燃情歲月
166: 二十二
167: 頭腦特工隊
168: 冰川時代
169: 無敵破壞王
170: 雨中曲
171: 我是山姆
172: 你的名字。
173: 人工智能
174: 爆裂鼓手
175: 穿越時空的少女
176: 魂斷藍橋
177: 未麻的部屋
178: 猜火車
179: 三塊廣告牌
180: 模仿遊戲
181: 一個叫歐維的男人決定去死
182: 房間
183: 羅生門
184: 忠犬八公物語
185: 完美陌生人
186: 恐怖遊輪
187: 阿飛正傳
188: 魔女宅急便
189: 香水
190: 朗讀者
191: 浪潮
192: 哪咤鬧海
193: 可可西裏
194: 黑客帝國3：矩陣革命
195: 海街日記
196: 諜影重重
197: 戰爭之王
198: 諜影重重2
199: 牯嶺街少年殺人事件
200: 地球上的星星
201: 一次別離
202: 追隨
203: 青蛇
204: 驚魂記
205: 終結者2：審判日
206: 瘋狂的石頭
207: 撞車
208: 源代碼
209: 再次出發之紐約遇見你
210: 小蘿莉的猴神大叔
211: 步履不停
212: 新龍門客棧
213: 初戀這件小事
214: 夢之安魂曲
215: 愛在午夜降臨前
216: 東京物語
217: 無恥混蛋
218: 城市之光
219: 天書奇譚
220: 綠裏奇跡
221: 彗星來的那一夜
222: 這個男人來自地球
223: 海蒂和爺爺
224: E.T. 外星人
225: 末路狂花
226: 血鉆
227: 勇闖奪命島
228: 聚焦
229: 變臉
230: 2001太空漫遊
231: 發條橙
232: 秒速5厘米
233: 黃金三鏢客
234: 卡薩布蘭卡
235: 黑鷹墜落
236: 非常嫌疑犯
237: 國王的演講
238: 我愛你
239: 美國麗人
240: 千鈞一發
241: 碧海藍天
242: 遺願清單
243: 瘋狂的麥克斯4：狂暴之路
244: 功夫
245: 荒島余生
246: 英國病人
247: 荒野生存
248: 海盜電臺
249: 槍火
250: 勇士

Python3 抓取豆瓣電影Top250