El robots.txt no permite el análisis

Es posible que el análisis de algunas páginas no pueda realizarse. Los puntajes de una página que no puede ser analizada no se muestran y se devuelve un mensaje de error.

En el caso de que el análisis no se haya realizado debido a un problema con el archivo Robots.txt, simplemente significa que el sitio prohíbe a nuestro robot analizar la página en cuestión.

¿Cómo permitir que Cocolyze analice mi página web?

Debes permitir a nuestro robot en el archivo Robots.txt, ubicado en la raíz del sitio web, en la dirección http://misitioweb.com/robots.txt

Este archivo contiene una lista de directrices que especifican para todos los robots (o robot por robot) la decisión de permitir la exploración del sitio o de una parte del sitio.

Nuestro robot es (para los robots.txt):

Cocolyzebot 

Nuestro User-Agent completo (visible en los registros de acceso del robot) es:

Mozilla/5.0 (compatible; Cocolyzebot/1.0; +https://cocolyze.com/cocolyzebot)

Encontrarás más información sobre el funcionamiento de los archivos Robots.txt en la documentación de Google.

No dudes en contactarnos si necesitas ayuda para permitir la exploración de tu sitio web  😉