Découvrez notre présentation afin de connaître l'utilité du robots.txt. Nous vous aidons également à le configurer pour votre site Wordpress.

3. Mais avant tout : C’est quoi un
robots.txt ?
Le robots.txt est un fichier situé à la racine de votre site internet ayant
pour objectif de contrôler les spiders de Google qui parcourent votre
site internet. Ce document est donc primordial pour contrôler les
statistiques et certaines parties de votre site internet.

4. Les avantages d’avoir un
robots.txt
1. Indexer dès le départ votre site internet
1. Facilite l’indexation sur le long terme de vos nouveaux
contenus
1. Bloquer les pages que vous ne souhaitez pas diffuser sur
internet

5. Indexer dès le départ votre site
internet
Le robots.txt permet d’envoyer les signaux aux spiders
de Google, leurs permettant de mettre en ligne le site
internet.

6. Faciliter l’indexation des futurs
contenus
Le robots.txt est favorable à une bonne indexation de votre site
internet sur le moteur de recherche Google. En effet, les robots.txt vont
parcourir l’ensemble des contenus et liens internes.
Si votre maillage interne est bien effectué, il sera très facile pour les
robots de google d’indexer toutes les URLs de votre site internet.

7. Un meilleur contrôle de votre site
internet :
Vous pouvez à tout moment dire aux robots de Google de ne pas
accéder à certaines pages de votre site internet.
Cela se traduit par une requête inclut dans le fichier : “Disallow”. La
requête Disallow (qui signifie en Français “ne pas suivre”) vous permet
de cacher certaines pages de votre site internet.

8. Quel Plug in utilisé
pour configurer votre
robots.txt
1. Plug in : SEO BY YOAST
1. Plug in : Virtual Robots.txt
1. Plug in : Robots.txt

9. Le plug-in SEO by Yoast :
Ce plug-in vous facilite la vie. Commencez par l’installer via votre
wordpress dans la partie extension.
Après son installation, vous le verrez s’afficher sur votre barre à
gauche avec ses fonctionnalités.
Pour le télécharger : https://fr.wordpress.org/plugins/wordpress-seo/

10. Le plug-in SEO Virtual Robotx.txt
C’est le second plug in le plus connu et le plus efficace. Il est
également très facile d’utilisation via l’administration de Wordpress.
Pour le télécharger : https://fr.wordpress.org/plugins/pc-robotstxt/

11. Le plug-in SEO Robotx.txt
C’est le troisième plug in le plus connu pour installer un robots.txt sur
votre site internet. Vous trouverez le lien de téléchargement ci-dessous
:
Pour le télécharger : https://fr.wordpress.org/plugins/tags/robotstxt

12. Comment communiquer
votre
robots.txt à Google ?
» Aller sur Googlewebmastertools
» Cliquez sur Exploration du site
» Ensuite sur “Outil de test de fichier robots.txt
» Vérification de votre Fichier robots.txt

13. Aller sur Google Webmaster Tools
-> Il existe plusieurs moyens d’indiquer à Google votre fichier
robots.txt. Le meilleur moyen reste d'utiliser Google webmaster tools.
-> Cliquez ici pour accèder à Google Webmaster Tools

14. Cliquez sur Exploration du site

15. Allez sur l’outil test du fichier
robots.txt

16. Vérification de votre fichier
robots.txt

21. Un soucis ? On peut
vous aider
Appellez nous au : 03 66 72 14 71