草庐IT

BaseSpider

全部标签

python - BaseSpider 和 CrawlSpider 的区别

我一直在努力理解在网络抓取中使用BaseSpider和CrawlSpider的概念。我读过docs.但是BaseSpider上没有提及。如果有人能解释一下BaseSpider和CrawlSpider之间的区别,那将对我很有帮助。 最佳答案 BaseSpider是以前存在的东西,现在已弃用(自0.22起)-使用scrapy.Spider代替:importscrapyclassMySpider(scrapy.Spider):#...scrapy.Spider是最简单的蜘蛛,它基本上会访问start_urls中定义的URL或start_r