Scrapy ignorer une méthode

Question

Je suis en train d'extraire les fichiers locaux de la page_source. Le Scrapy a complètement ignoré la fonction parse_nextfile(). Cela fonctionne parfaitement pour la fonction parse(). Je ne sais pas pourquoi ça arrive?

from scrapy import Spider 
from scrapy.loader import ItemLoader 
from linkedin.items import LinkedinItem 
import glob, os 

class ProfilesSpider(Spider): 

    name = 'profiles' 
    allowed_domains = ["file://127.0.0.1"] 
    start_urls = ["file://127.0.0.1/path/to/file/text.txt"] 

    def parse_nextfile(self,response): 

     #retrieve local files directory 
     request(url, callback = self.parse) 

    def parse(self, response): 
     #scraping the page_source file 

Answer 1

parse est le rappel par défaut de toute demande Scrapy.

Si vous avez besoin d'une autre méthode pour analyser une demande, vous devez indiquer dans la demande callback=self.parse_nextfile