Comment faire un bot pour naviguer sur un site?

Question

Étant donné un identifiant de produit, les associés doivent naviguer sur le site Web d'un fournisseur, se connecter, effectuer une recherche, afin d'obtenir des détails sur un produit pour un client. Mes employeurs veulent un programme qui peut utiliser l'identifiant du produit, et naviguer sur le site Web des fournisseurs, et effectuer la recherche et tout pour obtenir l'information, ce qui évite à l'associé de répéter manuellement cette tâche chaque fois qu'un client veut plus d'informations à propos d'un produit.

Je sais que de nombreux sites utilisent des méthodes pour empêcher (CAPTCHA) exactement ce que j'essaie de faire. Donc je ne sais pas si cela rend automatiquement mon projet donné "maléfique". Mais je n'ai certainement pas d'intentions malveillantes, mes employeurs veulent simplement faire gagner du temps aux associés pour obtenir des informations qu'ils obtiendront malgré tout. Cependant, s'il s'agit d'un «mal», veuillez expliquer pourquoi, afin que je puisse expliquer à mes employeurs pourquoi nous ne devrions pas emprunter cette voie. Cela étant dit ...

Comment puis-je faire quelque chose comme ça en PHP?

Answer 1

Pour commencer, je vous recommande la lecture sur cURL et DOM

cURL: http://php.net/curl (pour aller chercher pages, même simulation formulaire de recherche)

DOM: http://www.php.net/manual/en/book.dom.php (pour analyser les pages récupérées)

Answer 2

Cela dépend du site auquel vous essayez d'accéder. De nombreux sites ont une API qui peut être utilisée pour accéder aux données. Si ce n'est pas le cas, vous devrez peut-être écrire un programme qui charge le code HTML à l'aide d'une requête GET, analyser la réponse et récupérer les informations souhaitées. Sans plus de détails, c'est la meilleure réponse que je puisse donner.