scrapy的簡單使用
阿新 • • 發佈:2019-03-03
使用之前的創建虛擬環境方法(pipenv)
創建虛擬環境並進入虛擬環境
mkdir douban
cd douban pipenv install pipenv shell
再安裝我們的scrapy
pipenv install scrapy
然後創建項目
scrapy startproject doubanmovie
cd doubanmovie
scrapy genspider douban_movie (這裏加入你想要爬的網站url)
再使用pychram打開這個目錄
寫好代碼後在pycharm下方點擊終端輸入
scrapy crawl douban_movie
運行任務
簡單使用結束
scrapy的簡單使用
