J'écris un robot qui va parcourir un ensemble spécifique de sites Web et d'explorer tous les liens mp3 dans la base de données. Je ne veux pas télécharger les fichiers, il suffit d'explorer le lien, de les indexer et de pouvoir les rechercher. en utilisant php et comment certains sites linke guruji.comCrawler Mp3 Link pour les liens dynamiques
-1
A
Répondre
0
Vous voulez sans doute à la recherche d'expressions régulières - donc, une fois que vous avez connecté, faire quelque chose comme:
function crawl($url) {
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_TIMEOUT, 30); // 30 second timeout
curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
$result = curl_exec ($ch);
curl_close ($ch);
if ($result) {
// top domain links
preg_match_all('/<a(?:[^>]*)href=\"([^\"]*)\"(?:[^>]*)>(?:[^<]*)<\/a>/is', $result, $output, PREG_SET_ORDER);
foreach($output as $item) {
// each link found is output
echo "<pre>";
var_dump($item[0]);
// do your magic here
}
}
}
Ce ne trouvera que tous les liens, donc vous devrez ajuster le match à votre utilisation, ou proposer un filtre.
Questions connexes
- 1. MP3 link Crawler
- 2. Web crawler Analyse de liens PHP/Javascript?
- 3. Web crawler liens/page logique en PHP
- 4. Liens dynamiques dans Drupal
- 5. Sécurisation contre les liens dynamiques dans .NET
- 6. Liens dynamiques WebCrawling
- 7. Bibliothèque de liens dynamiques pour scanner optique
- 8. l'analyse d'une URL pour crawler
- 9. Dynamic SharePoint Navigation Link
- 10. Convertir l'URL pour crawler
- 11. Web Crawler Application
- 12. Problèmes de fonction de liens dynamiques problème jquery
- 13. Web crawler needed
- 14. Comment configurer un essai pour une bibliothèque de liens dynamiques?
- 15. Crawler écriture pour écran Grattage
- 16. Ajout de liens dynamiques à l'aide NavigateURL sur ASP.NET (VB)
- 17. Nouveau look Quicktime pour les mp3 embarqués
- 18. PHP: check $ msg pour contenir yt link
- 19. comment faire nutch crawler crawl
- 20. Créer un crawler/spider Web
- 21. Paramètres dynamiques pour les attributs
- 22. algorithme pour les combinaisons dynamiques
- 23. Problème PHP Link
- 24. Crawler, chemin relatif au chemin absolu
- 25. http live streaming pour les fichiers mp3
- 26. Decode Footer Link
- 27. Facebook fanpage crawler
- 28. avec PHP preg_replace() REGEX pour les URL MP3
- 29. PHP Word Crawler
- 30. Crawler C++ Open Source?
Bon pour vous ... alors quelle est votre question? Vous voulez que nous écrivions le robot: D? – codaddict
j'ai besoin de savoir comment faire pour les liens dynamiques .. j'ai écrit chenille pour les liens mp3 statiques ... – ramesh
Cette question semble être hors sujet parce que c'est une déclaration d'intention sans aucun doute. – Quentin