1. 程式人生 > >京東商城雙十一光棍節商品資訊採集教程

京東商城雙十一光棍節商品資訊採集教程

本文主要介紹“京東商品資訊採集爬蟲”(以下簡稱“京東爬蟲”)的使用教程及注意事項。

一年一度的光棍節就要到了,這個雙十一準備好趁手的採集工具沒呀?雖然市面上的採集工具種類繁多,但能夠採集京東商品的工具確實不多,而且對於像京東這類國內主流電商平臺,又該如何通過採集工具收集競品店鋪的商品價格、評價和月銷量情況呢!接下來,給你詳細介紹使用“京東爬蟲”採集和匯出商品資訊的步驟:

進入“京東爬蟲”總覽頁,點選爬蟲的“應用設定”,您可“重新命名爬蟲、增加爬蟲描述、選擇檔案託管方式、設定京東商品的爬取方式以及勾選自定義爬取項”,設定後別忘記“儲存”。

進入“京東爬蟲”總覽頁,點選“啟動爬蟲”,配置爬蟲使用的節點數並設定定時任務後,爬蟲便開始批量爬取京東商品資訊了,稍等片刻,就能在“爬取結果”頁檢視爬取的京東商品資訊了。

當爬蟲爬到資料後,你可以選擇將資料“釋出到網站或資料庫”中,此外,還可選擇將資料“匯出”。

“京東爬蟲”商品資訊匯出示例展示,如下圖所示:

目前,市面上趁手的工具不少,各大雲平臺(比如,神箭手雲平臺)都有提供,各位按需選擇。