écran Grattage - comment obtenir des données filtrées AJAX

Question

Je travaille sur screen scraping, il est facile lorsque filteration dans la chaîne de requête, mais le problème dans filteration AJAX,

par exemple here is an sample URL Lorsque vous ouvrez cette page, entrez le nom de l'hôtel et cliquez sur Aller, filtre Ajax fonctionne et affiche le résultat en conséquence ou vous cliquez sur la page suivante, il sera montré l'enregistrement suivant en utilisant AJAX basé.

S'il vous plaît me suggérer, comment gérer ce genre de problèmes lorsque vous travaillez dans le grattage de l'écran?

Merci beaucoup

Answer 1

Vous pouvez essayer 2 add-ons Firefox. Ils sont "Firebug" et "Tamper Data".

La fenêtre "Console" de Firebug affiche la requête et la réponse AJAX.

Vous pouvez ensuite écrire des scripts en utilisant la bibliothèque PHP/cURL pour imiter la requête.

Answer 2

Faites une demande http comme vous le faites normalement pour tout lien ou un formulaire Sumbit mais utilisez l'URL utilisée avec ajax. Parfois, vous devrez peut-être lire la source javascript pour déterminer comment l'URL est construite.