1. 程式人生 > >追蹤微博上的素人事件傳播規律——微博評論爬取

追蹤微博上的素人事件傳播規律——微博評論爬取

追蹤事件:眉有辦法的小吳

方法:爬取該事件的話題,以及話題下的評論,分析參與的微博賬號的數量與時間的關係

資料獲取:

  • 話題下的綜合,實時,熱門三個系列
  • 每個話題下的評論,轉發,點贊
  • 轉發後的評論,轉發,點贊

步驟:先爬完話題資料,把話題下的帖子url儲存到資料庫,再逐個爬取帖子和轉發帖子的所有資訊

爬取環境:python3+scrapy+redis