1. 程式人生 > >熟悉pyspider的裝飾器

熟悉pyspider的裝飾器

代碼 有效 boa 開發者 board splay 參數 一次 單步調試

熟悉pyspider的裝飾器取經地點:https://segmentfault.com/a/1190000002477863

  

  • @config(age=10 * 24 * 60 * 60) 在這表示我們認為 10 天內頁面有效,不會再次進行更新抓取
  • @every 修飾器,@every(minutes=24 * 60表示 on_start 每天會執行一次,知道這個規則之後就可以根據自己需要改參數了
  • 開始抓取

    1. 使用 run 單步調試你的代碼,對於用一個 callback 最好使用多個頁面類型進行測試。然後保存。
    2. 回到 Dashboard,找到你的項目
    3. status 修改為 DEBUGRUNNING
    4. run
      按鈕
    5. 打開一個新窗口
    6. Ctrl+Shift+I (在 Mac 上請按 Cmd+Opt+I) 打開開發者工具。
    7. 切換到網絡( Netwotk 面板)

熟悉pyspider的裝飾器