Editor Robots.txt para redes multisitio

Echa un vistazo a nuestro video sobre el uso de All in One SEO en WordPress Multisite Networks aquí.

Si dispone de una red multisitio de WordPress, puede gestionar reglas globales robots.txt que se aplicarán a todos los sitios de la red.

Vídeo tutorial

Para empezar, vaya a Network Admin y haga clic en All in One SEO > Network Tools en el menú de la izquierda.

Verá nuestro Editor de Robots.txt estándar donde puede activar y gestionar reglas personalizadas para su robots.txt.

Haga clic en Activar Robots.txt personalizados para activar el editor de reglas.

Debería ver la sección Vista previa de Robots.txt en la parte inferior de la pantalla, que muestra las reglas por defecto añadidas por WordPress.

Reglas predeterminadas de Robots.txt en WordPress

Las reglas predeterminadas que aparecen en la sección Vista previa de Robots.txt (mostradas en la captura de pantalla anterior) piden a los robots que no rastreen los archivos principales de WordPress. No es necesario que los motores de búsqueda accedan directamente a estos archivos porque no contienen ningún contenido relevante del sitio.

Si por algún motivo desea eliminar las reglas predeterminadas que añade WordPress, deberá utilizar el hook de filtro robots_txt de WordPress.

Añadir reglas mediante el generador de reglas

El creador de reglas se utiliza para añadir sus propias reglas personalizadas para rutas específicas en su sitio.

Por ejemplo, si desea añadir una regla para bloquear todos los robots de un directorio temporal, puede utilizar el creador de reglas para añadirla.

Para añadir una regla, introduzca el agente de usuario en el campo Agente de usuario. Si utiliza *, la regla se aplicará a todos los agentes de usuario.

A continuación, seleccione Permitir o No permitir para permitir o bloquear el agente de usuario.

A continuación, introduzca la ruta del directorio o el nombre del archivo en el campo Ruta del directorio.

Por último, haga clic en el botón Guardar cambios.

Si desea añadir más reglas, haga clic en el botón Añadir regla, repita los pasos anteriores y haga clic en el botón Guardar cambios.

Sus reglas aparecerán en la sección Vista previa de Robots. txt y en su robots.txt, que puede ver haciendo clic en el botón Abrir Robots.txt.

Cualquier regla que añada aquí se aplicará a todos los sitios de su red y no podrá anularse a nivel de sitio individual.

Edición de reglas mediante el generador de reglas

Para editar cualquier regla que haya añadido, sólo tiene que cambiar los detalles en el generador de reglas y hacer clic en el botón Guardar cambios.

Eliminar una regla en el generador de reglas

Para eliminar una regla que hayas añadido, haz clic en el icono de la papelera situado a la derecha de la regla.

Bloqueo de rastreadores no deseados

Puede utilizar la opción Bloquear rastreadores de IA para añadir reglas a su archivo robots.txt que bloqueen rastreadores conocidos, como los rastreadores de IA y Google AdsBot.

Puede seleccionar cada uno de los rastreadores para bloquearlos, o puede seleccionar Todos los rastreadores AI para bloquear todos los de la lista.

Bloqueo del rastreo de URL de búsqueda interna del sitio

Puede utilizar la opción Bloquear el rastreo de URL de búsqueda interna del sitio para añadir reglas a su archivo robots.txt que impidan el rastreo de URL de páginas de búsqueda. Esto reduce el rastreo innecesario de su sitio.

Gestión de Robots.txt para subsitios

En el Editor Robots.txt multisitio, es muy fácil editar las reglas robots para cualquier sitio de su red.

Para empezar, simplemente haga clic en el menú desplegable del selector de sitios de la parte superior del Editor Robots.txt. Desde allí, seleccione el sitio para el que desea editar las reglas, o búsquelo escribiendo el dominio:

Una vez que haya seleccionado un sitio, las reglas de abajo se actualizarán automáticamente y podrá modificar/cambiar las reglas sólo para ese sitio. Asegúrese de hacer clic en Guardar cambios después de modificar las reglas para el subsitio.