MBSuite-Crawler y MB-Suite-SiteAuditor. Si el firewall del sitio o Cloudflare los frena, autoriza los dos: con uno solo, una parte de la auditoría sigue bloqueada.Si llegaste a esta página desde los registros de tu servidor, es el rastreador de MB Suite: alguien audita el SEO técnico del sitio con MB Suite. Solo lee páginas y archivos públicos, los mismos que lee un buscador.
¿Cuáles son sus dos User-Agents?
| Nombre | Qué hace | User-Agent completo |
|---|---|---|
MBSuite-Crawler | Lee las páginas del sitio cuando el sitio frena el primer intento. | Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/136.0.0.0 Safari/537.36 MBSuite-Crawler/1.0 |
MB-Suite-SiteAuditor | Revisa robots.txt, sitemap.xml, llms.txt, las redirecciones del dominio (www y HTTPS), la página 404, el listado de directorios y la versión HTTP/2. | Mozilla/5.0 (compatible; MB-Suite-SiteAuditor/1.0; +https://help.mb-suite.com/seo/site-auditor-crawler) |
Para leer las páginas, el rastreador entra primero como un navegador Chrome común. Si el sitio lo frena (Cloudflare u otro firewall), vuelve a intentar identificándose como MBSuite-Crawler: ese es el nombre que tu firewall tiene que dejar pasar. Las verificaciones del dominio salen siempre como MB-Suite-SiteAuditor. El rastreador corre en servidores de Google Cloud, así que la regla se arma por User-Agent.
¿Cómo sé que están bloqueando al rastreador?
- La auditoría falla, o dice que no pudo analizar algunas páginas: el firewall frenó a
MBSuite-Crawler. - El reporte muestra el aviso Verificaciones del dominio bloqueadas, con la lista de lo que no pudo verificar (robots.txt, sitemap.xml, las redirecciones…): el firewall frenó a
MB-Suite-SiteAuditor. Esas verificaciones no restan al puntaje de salud, y el enlace Cómo autorizar el rastreador del aviso te trae aquí. - Si MB Suite detecta Cloudflare en el sitio, la pestaña Configuración del sitio muestra Tu sitio usa protección Cloudflare, con estos mismos pasos y un botón para copiar cada nombre.
¿Cómo lo autorizo en Cloudflare?
- Entra al panel de Cloudflare de tu dominio.
- Ve a Security → Security Rules (Reglas de seguridad) y crea una regla nueva.
- Campo User Agent, operador contains, valor
MBSuite-Crawler. Suma una segunda condición con Or (O): campo User Agent, operador contains, valorMB-Suite-SiteAuditor. - Como acción, elige Skip (All remaining custom rules).
- Guarda la regla y vuelve a auditar con Auditar ahora, o espera la próxima auditoría programada.
¿Y en otro firewall?
En cualquier otro firewall o WAF (el de tu hosting, un plugin de seguridad, una regla del servidor…), la idea es la misma: una regla que deje pasar las solicitudes cuyo User-Agent contenga MBSuite-Crawler o MB-Suite-SiteAuditor, antes de las reglas que bloquean bots. Si el panel no tiene reglas por User-Agent, pídeselo a tu proveedor de hosting con los dos nombres.
MBSuite-Crawler deja pasar las páginas pero deja bloqueadas las verificaciones del dominio; una con solo MB-Suite-SiteAuditor, al revés.¿Te quedan más dudas?
Pregúntale a MIA, el asistente de IA de MB Suite: lo abres con el botón MB AI (⌘J) en la barra superior. MIA conoce la sección en la que estás, así que puedes consultarle sobre lo que ves en pantalla, y también responde preguntas de cómo usar MB Suite.