1. 程式人生 > 實用技巧 >scrapy專案的目錄結構

scrapy專案的目錄結構

scrapy專案的目錄結構

在一個工程裡,建立Scrapy框架的專案需要使用命令:scrapy startproject 專案名

建立成功後會出現以下劃紅方框的目錄結構:

微信截圖_20200413225847.png

spiders:儲存爬蟲程式碼目錄

__init__.py:爬蟲專案的初始化檔案,用來對專案做初始化工作。

items.py:爬蟲專案的資料容器檔案,用來定義要獲取的資料。儲存資料

pipelines.py:爬蟲專案的管道檔案,用來對items中的資料進行進一步的加工處理。

settings.py:爬蟲專案的設定檔案,包含了爬蟲專案的設定資訊。

middlewares.py:爬蟲專案的中介軟體檔案。

scrapy.cfg:爬蟲專案的配置檔案。