Añade estas dos líneas a tu archivo robots.txt. BephicBot lo lee antes de cada visita y, con ellas, no volverá a entrar:
User-agent: BephicBot
Disallow: /Paso a paso
- Abre el archivo
robots.txtde tu sitio. Está en la raíz, por ejemplohttps://tusitio.com/robots.txt. Si no existe, créalo. - Añade las dos líneas de arriba, en un bloque propio (con una línea en blanco antes, si hay otras reglas).
- Guarda el archivo y súbelo a tu sitio.
- Comprueba que se abre en el navegador en
https://tusitio.com/robots.txt.
Si tu página la hizo alguien más o usas un creador de páginas (como WordPress, Wix o Shopify), busca la opción para editar robots.txt en sus ajustes, o pídeselo a quien la administra.
Cuándo hace efecto
En la próxima visita. BephicBot no guarda tu robots.txt de antes: lo pide de nuevo cada vez. No tienes que avisarnos.
Si ya bloqueas a todos los robots
Si tu robots.txt tiene esto, BephicBot tampoco entra:
User-agent: *
Disallow: /Ojo: si además tienes un bloque propio para BephicBot, BephicBot sigue ese bloque y no el general. Mira ¿Cómo lee BephicBot mi robots.txt?.
Pruébalo
En la página Bephic Bot puedes pegar tu robots.txt y ver si BephicBot puede entrar. Mira ¿Cómo pruebo si BephicBot puede entrar?.