LargitData — 企業情報與風險 AI 平台

[Scrapy 爬蟲] 什麼是Scrapy以及為什麼要用Scrapy 爬取網頁?

  • 大數學堂

透過 Scrapy 網路爬蟲框架,我們就可以在不用重造輪子的情況下撰寫較為完整且具非同步化(asynchronous)請求能力的網路爬蟲。

安裝步驟:

1. 下載並安裝 Anaconda Python

2. 在Anaconda Command Prompt 鍵入 pip install scrapy

3. 開啟爬蟲專案: scrapy startproject apple