Signaler

Qu'est ce que je dois mettre dans le fichier robots.txt [Résolu/Fermé]

Posez votre question dalydooo 54Messages postés dimanche 19 avril 2015Date d'inscription 11 septembre 2017 Dernière intervention - Dernière réponse le 16 juil. 2016 à 06:56 par elgazar
Bonjour,
Je veut savoir qu'est ce que je dois mettre dans le fichier robots.txt
J'ai ce code :
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

est ce que je peut ajoutée ces lignes suivants :
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-Agent: Googlebot
Allow: /

User-Agent: Googlebot-Mobile
Allow: /

User-Agent: Googlebot-Image
Allow: /

User-Agent: Mediapartners-Google
Allow: /

User-Agent: Adsbot-Google
Allow: /

User-Agent: Slurp
Allow: /

User-Agent: msnbot
Allow: /

User-Agent: msnbot-media
Allow: /

User-Agent: Teoma
Allow: /


ou bien qu'est ce que je dois mettre dans ce fichier

merci d'avance
Utile
+0
plus moins
Bonjour
cela ne sert a rien de mettre des allow car si ce n'est pas interdit par disallow, c'est forcément autorisé

a ta place je ne modifierais pas le code d'origine puisqu'il interdit à tous les moteurs l'indexation de wp-admin a l'exception du fichier admin-ajax (pourquoi ce fichier ? )

Les membres obtiennent plus de réponses que les utilisateurs anonymes.

Le fait d'être membre vous permet d'avoir un suivi détaillé de vos demandes.

Le fait d'être membre vous permet d'avoir des options supplémentaires.

Vous n'êtes pas encore membre ?

inscrivez-vous, c'est gratuit et ça prend moins d'une minute !