Téléchargement d'un dossier complet de fichiers à partir de l'URL

Question

J'écris un programme/script dans python3. Je sais comment télécharger des fichiers uniques à partir d'une URL, mais j'ai besoin de télécharger le dossier entier, décompresser les fichiers et fusionner les fichiers texte.

Est-il possible de télécharger tous les fichiers FROM HERE dans un nouveau dossier sur mon ordinateur avec python? J'utilise un urllib pour télécharger un seul fichier, quelqu'un peut-il donner un exemple de comment télécharger un dossier entier à partir du lien ci-dessus?

Answer 1

Installer BS4 et les demandes, que vous pouvez utiliser le code comme ceci:

import bs4 
import requests 

url = "http://bossa.pl/pub/metastock/ofe/sesjaofe/" 
r = requests.get(url) 
data = bs4.BeautifulSoup(r.text, "html.parser") 
for l in data.find_all("a"): 
    r = requests.get(url + l["href"]) 
    print(r.status_code) 

Que vous devez enregistrer les données de la demande dans votre répertoire.