Comment interdire Cocolyze de scanner mon site web?

Cocolyze utilise son robot, Cocolyzebot pour scanner et analyser les pages web.

Il se peut, dans certains cas, que vous ne souhaitiez pas qu'un site web ou qu'une page web en particulier soit analysé sur Cocolyze. Le site web, ou la page web, ne sera alors plus analysable par Cocolyze.

Comment interdire Cocolyze d'analyser mon site web?

Il faut interdire notre robot dans le fichier Robots.txt, situé à la racine du site web, à l'adresse http://monsiteweb.com/robots.txt

Ce fichier contient une liste de directives précisant pour tous les robots (ou robot par robot) la décision d'autoriser l'exploration du site ou d'une partie du site.

Notre robot est (utilisé pour les robots.txt) :

Cocolyzebot 

Notre User-Agent complet (visible dans les logs de passages du robot) est : 

Mozilla/5.0 (compatible; Cocolyzebot/1.0; +https://cocolyze.com/cocolyzebot)

Vous trouverez plus d'informations sur le fonctionnement des fichiers Robots.txt sur la documentation Google.

N'hésitez pas à nous contacter si vous avez besoin d'aide pour autoriser l'exploration de votre site web