scrapy分页抓取网页(我很困难,无法弄清楚为什么我的CrawlSpider无法拾取并处理HTML代码中的相关链接)我很困难,无法弄清楚为什么我的CrawlSpider无法拾取并处理HTML代码中的相关链接。Scrapy不抓取LinkExtractor允许的页面下面是我可以通过一些PARAMS在命令行中,像这样一个cawlspider:蜘蛛运行,绝对拒绝抓取列表分页的页面。allowed="page="的commans那么它将皮卡两个页面,但它仍然拒绝继续。任何人都可以在我的代码下面发现问题?
继续阅读 »