我有一些结构的站点：页面喜欢带有名称，链接，一些信息的列表。从此页面，我需要解析一些信息。以及链接中页面的一些信息。输出-通过列表页面和页面通过链接进行信息的JSON。但是我有“2个JSON”例如：[{"status":"CFO"},{"status":"MD/Partner"},{"status":"CEO"},][{"name":"MarcoRodzynek","link":"https:\/\/www.noah-conference.com\/attendee\/marco-rodzynek\/","company":"NOAHAdvisors","company_link":"Noco

我想知道，在Python中是否有可能在这样的链接上制定条件：ifmy_linkisallowed:我试过了：allowed_domains=['exemple.com']ifmylink.exemple.cominallowed_domains:something因此，我的链接是允许的，但不写在允许的domains中...我该怎么办？看答案你可以看看如何OffsiteMiddleware已实施（关联），具体来说should_follow方法。您可以从那里重复使用逻辑。

我想使用砂纸从动态内容中爬网。我从互联网上得到必须安装Docker。但是安装它后，运行时总是会出现错误：scrapyrunspiderexample.py或其他砂纸命令。然后我卸载了Docker。但是错误仍显示。这是错误：然后，我尝试安装pypiwin32，也有一个错误：如何解决？看答案也许只是一个permissiondenied因为PIP试图在需要更多特权的目录中设置文件。尝试使用管理特权并执行执行控制台：pipinstallpypiwin32然后重试无需管理特权即可运行脚本。编辑：如果您不想运行CMD为管理员，则可以尝试以下操作：python-mpipinstallpypiwin32但是我

因此，我正在尝试使用爬网，并理解以下示例废纸文档:importscrapyfromscrapy.spidersimportCrawlSpider,Rulefromscrapy.linkextractorsimportLinkExtractorclassMySpider(CrawlSpider):name='example.com'allowed_domains=['example.com']start_urls=['http://www.example.com']rules=(#Extractlinksmatching'category.php'(butnotmatching'subsecti