1. 程式人生 > >為什麽要使用scrapy而不是requests+beautifulsoup?

為什麽要使用scrapy而不是requests+beautifulsoup?

網絡 soup quest nodejs cnblogs 總結 scrapy 效率 http

技術分享

總結起來,有倆點最重要:

1)scrapy使用twisted異步網絡框架,類似nodejs,性能高;

2)scrapy內置的selector比beautifulsoup效率要高很多;

為什麽要使用scrapy而不是requests+beautifulsoup?