1. 程式人生 > >Scrapy-Redis的安裝和使用

Scrapy-Redis的安裝和使用

org adt tps 擴展模塊 pytho 方便 imp scrapy ins

Scrapy-Redis是Scrapy的分布式擴展模塊,有了它,我們就可以方便地實現Scrapy分布式爬蟲的搭建。
GitHub:https://github.com/rmax/scrapy-redis
PyPI:https://pypi.python.org/pypi/scrapy-redis
官方文檔:http://scrapy-redis.readthedocs.io

一、安裝Scrapy-Redis

pip3 install scrapy-redis

也可以下載wheel文件安裝https://pypi.python.org/pypi/scrapy-redis#downloads

測試:
import scrapy_redis #不報錯即可

Scrapy-Redis的安裝和使用