草庐IT

parseDescription

全部标签

python - 我如何在scrapy python中使用多个请求并在它们之间传递项目

我有item对象,我需要将它传递给许多页面以将数据存储在单个项目中就像我的商品一样classDmozItem(Item):title=Field()description1=Field()description2=Field()description3=Field()现在这三个描述位于三个单独的页面中。我想做类似的事情现在这适用于parseDescription1defpage_parser(self,response):sites=hxs.select('//div[@class="row"]')items=[]request=Request("http://www.example.

python - 我如何在scrapy python中使用多个请求并在它们之间传递项目

我有item对象,我需要将它传递给许多页面以将数据存储在单个项目中就像我的商品一样classDmozItem(Item):title=Field()description1=Field()description2=Field()description3=Field()现在这三个描述位于三个单独的页面中。我想做类似的事情现在这适用于parseDescription1defpage_parser(self,response):sites=hxs.select('//div[@class="row"]')items=[]request=Request("http://www.example.