Nuestro bot
webAInalizer-Bot
Si viste «webAInalizer-Bot» en los registros de tu servidor, es nuestro analizador. Solo lee páginas públicas y solo cuando alguien pide un análisis.
Cuándo visita un sitio
Cuando alguien analiza su sitio en webainalizer.com, y en el reporte completo, cuando un motor de IA menciona a un competidor de ese sitio: entonces leemos también la parte pública del competidor para compararlos. No recorremos la web por nuestra cuenta.
Qué lee y a qué ritmo
robots.txt, llms.txt, el sitemap, la portada y como máximo 10 páginas, una a la vez, con al menos 400 ms entre una y otra y un límite de 90 segundos por sitio. No envía formularios, no inicia sesión y no guarda nada que no sea público.
Cómo bloquearlo
Agrega a tu robots.txt: «User-agent: webainalizer-bot» y en la línea siguiente «Disallow: /». Con eso no visitamos tu sitio, ni siquiera la portada. También respetamos las páginas internas que bloquees a todos los bots; la portada sí la leemos en ese caso, para poder avisarle al dueño si su robots.txt bloquea todo por error.
Preguntas frecuentes
¿Cómo lo reconozco?
Su agente de usuario empieza con «webAInalizer-Bot/» y enlaza a esta página.
¿Con quién hablo si causa un problema?
Escríbenos a [email protected] con tu dominio y la hora aproximada.