Scrapy Spider Webpage Extraction

Question

J'essaie d'extraire des données de la page Web (https://www.cato.org/research/34/commentary) si python. Il contient des liens vers un article et à partir de cet article particulier, je dois extraire la date, l'auteur et le titre de l'article.Et j'ai répéter la même opération à tout l'article.

Je suis en mesure d'extraire le titre du document de cette commande:

response.css('h1.page-h1::text').extract() 

et suivre l'article lien:

response.css('p.text-large.experts-more-h' > a::attr(href)').extract_first() 

Mais comment puis-je faire pour tous les liens? S'il vous plaît, aidez, je suis nouveau à cela.

Answer 1

Do

for art in response.css('p.text-large.experts-more-h' > a'): 
    art.css("::attr(href)").extract_first()