Demande de recherche automatique et de grattage d'un site Web

Question

Quelle application dois-je utiliser pour accéder automatiquement à un site Web afin de recueillir de l'information?

Fondamentalement, j'ai une base de données qui complète les calculs pour moi; Cependant, je dois rassembler manuellement les paramètres d'un site Web et entrer ceux-ci dans ma base de données.

Ce que je voudrais est d'avoir une application qui procédez comme suit:

1. J'entrez le nom d'un produit,
2. L'application accède au site Web, en utilisant la fonction de recherche du site pour trouver des informations sur la produit,
3. L'application télécharge certaines informations sur ce produit,
4. Il effectue des calculs sur cette information, puis
5. Affiche les résultats de ces calculat ions à moi

Ceci est un peu hors de ma profondeur, mais je suis prêt à apprendre, peu importe la complexité du logiciel.

Answer 1

Vous n'êtes pas à la recherche d'une base de données. Vous devez écrire une application qui ira et obtenir des données à partir de pages Web, puis les insérer dans une base de données. En d'autres termes, vous devez créer un "robot" ou un "scraper", puis déposer les résultats dans une base de données telle que MySQL.