2010-04-12 6 views
-3

Est-ce que quelqu'un sait où je peux obtenir un crawler de Web libre qui fonctionne réellement avec le codage minimal par moi? Je l'ai googlé et je ne peux trouver que des vieux qui ne fonctionnent pas ou qui ne fonctionnent pas.Web crawler needed

Idéalement, je voudrais stocker uniquement les adresses Web et les liens que cette page contient.

Des suggestions?

Répondre

4

Je recommanderais d'en écrire un à partir de zéro. Vous pouvez utiliser le temps que vous passez à chercher le robot pour en écrire un.

+2

+1. Je ne pense pas qu'il existe un codage minimal dans cette zone (toute?) Car chaque moteur de balayage Web est subtilement différent. –

+0

Je ne pense pas que j'ai la capacité de codage, j'ai seulement un peu d'expérience en C++ et je dois l'avoir commencer à ramper en trois jours max donc je n'ai pas le temps. – user314011

+0

maintenant écrire mon propre crawler, j'espère que cela fonctionne – user314011