我一直在非常广泛地使用Scrapy网络抓取框架，但是，最近我发现还有另一个名为pyspider的框架/系统，根据它的github页面，它是新鲜的，积极开发和流行的。pyspider的主页列出了几个开箱即用支持的东西:PowerfulWebUIwithscripteditor,taskmonitor,projectmanagerandresultviewerJavascriptpagessupported!Taskpriority,retry,periodicalandrecrawlbyageormarksinindexpage(likeupdatetime)Distributedarc

我一直在非常广泛地使用Scrapy网络抓取框架，但是，最近我发现还有另一个名为pyspider的框架/系统，根据它的github页面，它是新鲜的，积极开发和流行的。pyspider的主页列出了几个开箱即用支持的东西:PowerfulWebUIwithscripteditor,taskmonitor,projectmanagerandresultviewerJavascriptpagessupported!Taskpriority,retry,periodicalandrecrawlbyageormarksinindexpage(likeupdatetime)Distributedarc