J'utilise Searcharoo.NET pour explorer un site web "testsite.com/en" avec une langue spécifique. Il y a un "testsite.com/fr", "testsite.com/us" et ainsi de suite. Plus tard, je veux indexer les pages sur chaque site, donc je peux être disponible pour la recherche, mais je veux séparer les différentes langues. Le problème est que lorsque searcharoo commence à explorer sur testsite.com, il indexe également les pages des autres langues telles que testsite.com/fr. Y a-t-il un moyen d'empêcher cela? Je pensais que je pouvais restreindre le robot d'exploration à seulement aller de l'avant ou dire stopper sur certaines pages, mais je n'ai trouvé aucune documentation sur le sujet de searcharoo.Restreindre Searcharoo à certaines pages seulement
Très apprécié, merci!