志强爱璇璇
-
scrapy — CrawlSpider类
CrawlSpider类是什么? 是Spider的一个子类 区别: Spider是获取到URL进行 手动发送请求 : yield scrapy.Request(url=new_url,callback=self.parse) 是通过提取器类:LinkExtractor,提前到页面所有符合条件的URL,然后用Rule类对符合条件的URL自动发送请求 创建Cra…
CrawlSpider类是什么? 是Spider的一个子类 区别: Spider是获取到URL进行 手动发送请求 : yield scrapy.Request(url=new_url,callback=self.parse) 是通过提取器类:LinkExtractor,提前到页面所有符合条件的URL,然后用Rule类对符合条件的URL自动发送请求 创建Cra…