1. 首先得有一個Scrapy專案，我在Desktop上新建一個Scrapy的專案叫test，在Desktop目錄開啟命令列，鍵入命令：scrapy startproject test1 
   

   
    
   
   目錄結構如下： 
   
    
    
    
   

2. 開啟Pycharm，選擇open 
   

   
    
   

3. 選擇專案，ok 
   

   

4. 開啟如下介面之後，按alt + 1， 開啟project 面板 
   

   
    

5. 在test1/spiders/，資料夾下，新建一個爬蟲spider.py， 注意程式碼中的name="dmoz"。這個名字後面會用到。 
   

   

6. 在test1目錄和scrapy.cfg同級目錄下面，新建一個begin.py檔案（便於理解可以寫成main.py），注意箭頭2所指的名字和第5步中的name='dmoz'

    名字是一樣的。

    from scrapy import cmdline

    cmdline.execute("scrapy crawl dmoz".split())

• 1
• 2
• 3

• 1
• 2
• 3

除錯

可以在其他程式碼中設定斷點，就可以debug執行

轉載1：http://www.jianshu.com/p/f85120fcbca0

轉載2：http://blog.csdn.net/wangsidadehao/article/details/52911746