1. 程式人生 > >windows環境下新建scrapy

windows環境下新建scrapy

1.新建一個虛擬環境:cmd ----》 mkvirtualenv article

在建立虛擬環境指定Python版本,mkvirtualenv --python=python的安裝路徑 article_spider,其中等號後面就是Python的安裝路徑值,article_spider是名稱

直接python命令來檢視Python的版本。

直接進入到article_spider虛擬環境中操作命令:pip install -i https://pypi.douban.com/simple/  scrapy

找一個工程存放的路徑:

1.work on article_spider,work on 到虛擬環境中去

2.scrapy startproject ArticleSpider,建立scrapy工程

3.用pychram匯入進來,open ArticleSpider

4.使用scrapy的模板,需要指定對應的網址url及名稱,這個名稱作為py的檔名,進入到專案目錄下執行命令

scrapy genspider jobbole blog.jobbole.com