yield scrapy.Request(self.start_urls[0], callback=self.parse,dont_filter=True)dont_filter=True这里很重要,表示这个url不被去重。示例代码import scrapyimport jsonfrom alipa
Pyquery,简单使用撒!
requests 我爬,我爬,我爬爬爬!
yield scrapy.Request(self.start_urls[0], callback=self.parse,dont_filter=True)dont_filter=True这里很重要,表示这个url不被去重。示例代码import scrapyimport jsonfrom alipa
Pyquery,简单使用撒!
requests 我爬,我爬,我爬爬爬!