Je veux que toutes les pages de produits soient sans index. Ils ne doivent pas être indexés par Google ou par un moteur de recherche. Je ne veux que de classer les pages de la catégorie, les informations du site, etc.Comment empêcher l'index du moteur de recherche uniquement sur la page du produit?
Créer robots.txt dans la racine du site et du prochain code
User-agent: *
Disallow: /products/*
S'il vous plaît lire la documentation pour robots.txt, * - signifie tous les symboles.
Vous pouvez essayer d'utiliser ce générateur http://tools.seobook.com/robots-txt/generator/
Ou mieux embaucher des professionnels.
1) Le fichier doit être appelé 'robots.txt', pas' robot.txt'. 2) Pas besoin de '' 'après'/products/', car dans 'Disallow' c'est toujours le * début * du chemin de l'URL. 3) robots.txt empêche l'exploration, pas nécessairement l'indexation. – unor
Eh bien, vous devez utiliser '' sur les pages qui ne peuvent être indexées .. – Naruto
@Naruto sur un système dynamique je ne peux pas utiliser cette option parce que mon produit les pages sont dynamiques. Je peux résoudre mon problème avec le code robots.text –