Nuestro robot: SpyXBot
¿Ha visto SpyXBot en los registros de su servidor? Aquí tiene quién es, qué hace y cómo bloquearlo si lo desea. English version below.
¿Quién es SpyXBot?
SpyXBot es el robot de SpyX, una herramienta de auditoría SEO y de visibilidad en las IA. Solo visita una web cuando alguien solicita su auditoría en spyx.fr — nunca de forma espontánea ni periódica. Se presenta con la siguiente cabecera:
Mozilla/5.0 (compatible; SpyXBot/1.0; +https://spyx.fr/robot)
Qué hace
- Lee primero su robots.txt y respeta sus reglas: toda zona en
Disallow(paraSpyXBoto para*) no se visita, ni se prueba, ni se cuenta. - Explora como máximo 300 páginas HTML por auditoría, siguiendo los enlaces internos desde la página de inicio y, en los sitios grandes, añadiendo una muestra de URL de su sitemap, con una petición cada 250 ms como máximo.
- Reduce el ritmo por sí mismo en cuanto su servidor responde 429 (demasiadas peticiones), sin contar nunca esa respuesta como un error de su web.
- Comprueba la existencia de robots.txt, sitemap.xml, llms.txt y de una página 404, y el peso de una muestra de imágenes (peticiones HEAD, sin descarga).
- No rellena ningún formulario, no crea ninguna cuenta, no ejecuta JavaScript y solo guarda lo necesario para el informe solicitado.
Cómo bloquearlo
Añada estas dos líneas a su archivo robots.txt; SpyXBot dejará de explorar su web desde la siguiente auditoría:
User-agent: SpyXBot
Disallow: /
Para excluir solo una zona, indique su ruta en lugar de / (por ejemplo Disallow: /go/).
¿Alguna pregunta?
Escríbanos: contact@auraleads.fr. SpyX es editado por Auraleads (Francia).
About SpyXBot (English)
SpyXBot is the crawler of SpyX, an SEO and AI-visibility audit tool. It only visits a website when someone requests an audit of that site on spyx.fr — never on its own schedule. It identifies itself as Mozilla/5.0 (compatible; SpyXBot/1.0; +https://spyx.fr/robot).
- It reads your robots.txt first and honours it: anything under
Disallow(forSpyXBotor*) is neither fetched, tested nor counted. - It crawls at most 300 HTML pages per audit, following internal links from the home page (plus a sample of sitemap URLs on large sites), with at least 250 ms between requests, and backs off as soon as your server answers 429.
- It checks robots.txt, sitemap.xml, llms.txt, the 404 page, and the size of a sample of images (HEAD requests only). It submits no forms, creates no accounts and runs no JavaScript.
To block it, add to your robots.txt:
User-agent: SpyXBot
Disallow: /
Questions: contact@auraleads.fr.