1. 程式人生 > >安裝Scrapy爬蟲框架

安裝Scrapy爬蟲框架

1、Scrapy的安裝:pip install scrapy

遇到錯誤:

 error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools"

解決方法:

http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下載twisted對應版本的whl檔案(如我的是win7,Python3.7,選的是Twisted-18.9.0-cp37-cp37m-win_amd64.whl),cp後面是python版本,amd64代表64位,執行命令:
pip install D:\someSoft\Python\Twisted-18.9.0-cp37-cp37m-win_amd64.whl

其中install後面為下載的whl檔案的完整路徑名 
安裝完成後,再次執行:

pip install Scrapy

    安裝測試:scrapy -h