1. 程式人生 > > scrapy的簡單使用

scrapy的簡單使用

douban pycha rtp har scrapy clas art 我們 shel

使用之前的創建虛擬環境方法(pipenv)

創建虛擬環境並進入虛擬環境

mkdir douban 
cd douban pipenv install pipenv shell

再安裝我們的scrapy

pipenv install scrapy

然後創建項目

scrapy startproject doubanmovie
cd doubanmovie
scrapy genspider douban_movie (這裏加入你想要爬的網站url)

再使用pychram打開這個目錄

寫好代碼後在pycharm下方點擊終端輸入

scrapy crawl douban_movie

運行任務

簡單使用結束

scrapy的簡單使用