Editar el archivo robots.txt de tu sitio
4 min
En este artículo
- entender tu archivo robots.txt
- editar tu archivo robots.txt
- restablecer tu archivo robots.txt
- Error de robots.txt en la Inspección del sitio de Wix o en Google Search Console
Importante:
Editar tu archivo robots.txt es una función avanzada. Realizar cambios en este archivo puede causar problemas con la aparición de tu sitio en los resultados de búsqueda. La atención al cliente de Wix no puede ayudarte con los cambios que realices en tu archivo robots.txt.
Un archivo robots.txt les indica a los motores de búsqueda cuáles de las páginas de tu sitio deben incluir u omitir en sus resultados de búsqueda. Los motores de búsqueda comprueban el archivo robots.txt de tu sitio cuando rastrean e indexan tu sitio. Esto no garantiza que los motores de búsqueda rastreen o no una página o un archivo, pero puede ayudar a evitar intentos de indexación menos precisos.
Si quieres tener un mejor control de las solicitudes de rastreo a tu sitio, puedes editar tu archivo robots.txt.
Si quieres tener un mejor control de las solicitudes de rastreo a tu sitio, puedes editar tu archivo robots.txt.
Consejo:
- Puedes evitar que los motores de búsqueda indexen una página individual en el editor de tu sitio.
- También puedes tener más control sobre cómo los motores de búsqueda indexan las páginas de tu sitio utilizando la etiqueta meta robots. Por ejemplo, puedes usar una etiqueta "nofollow" para decirles a los motores de búsqueda que no sigan ningún enlace de una página. Leer más sobre la etiqueta meta robots
entender tu archivo robots.txt
El archivo robots.txt contiene instrucciones para permitir o rechazar ciertas solicitudes de los motores de búsqueda. El comando "allow" les indica a los rastreadores los enlaces que pueden seguir, mientras que el comando "disallow" les indica los enlaces que no pueden seguir. También incluye la URL del archivo del mapa de sitio de tu sitio.
Puedes ver el archivo robots.txt de tu sitio agregando "/robots.txt" a tu dominio raíz. Un ejemplo sería: https://www.misitiowebincreible.com/robots.txt.
¿Quieres leer más?
- Ve a la Guía de SEO de Wix para leer nuestro artículo sobre el archivo robots.txt.
- Obtén más información sobre cómo interpreta Google el archivo robots.txt de tu sitio
editar tu archivo robots.txt
Puedes editar el archivo robots.txt de tu sitio utilizando el Editor de robots.txt en el panel de control de SEO de tu sitio. El archivo robots.txt de tu sitio permite que los bots de los motores de búsqueda accedan a todas las páginas de tu sitio por defecto. Es posible que los bots no puedan acceder a ciertas páginas si están:
- Páginas protegidas con contraseña
- Páginas solo para miembros
- Páginas en las que has evitado la indexación en el Editor de tu sitio o en los Ajustes de SEO de tu sitio
Antes de realizar cambios en tu archivo robots.txt, te recomendamos consultar las pautas y limitaciones de Google para los archivos robots.txt.
Importante:
Editar el archivo robots.txt de tu sitio puede causar problemas con la forma en que las páginas de tu sitio aparecen en los resultados de búsqueda.
Para editar tu archivo robots.txt:
- Ve a tu panel de control de SEO.
- Selecciona Ir al Editor de robots.txt en Herramientas y ajustes.
- Haz clic en Ver archivo.
- Agrega la información de tu archivo robots.txt escribiendo las directivas bajo Este es tu archivo actual.
- Hacer clic en Guardar cambios.
- Hacer clic en Guardar.
Consejo:
- Los motores de búsqueda actualizarán la versión en caché de tu archivo robots.txt la próxima vez que rastreen tu sitio.
- Si necesitas actualizarla más rápido, puedes intentar enviar la URL de tu página de inicio a los motores de búsqueda.
restablecer tu archivo robots.txt
Si has cambiado el archivo robots.txt de tu sitio y quieres volver a cambiarlo, puedes restablecerlo a su estado predeterminado utilizando el Editor de robots.txt en el panel de control de SEO de tu sitio.
Para restablecer tu archivo robots.txt:
- Ve al panel de control de SEO.
- Selecciona Ir al Editor de robots.txt en Herramientas y ajustes.
- Haz clic en Ver archivo.
- Haz clic en Restablecer valores predeterminados.
- Hacer clic en Restablecer.
Consejo:
- Los motores de búsqueda actualizarán la versión en caché de tu archivo robots.txt la próxima vez que rastreen tu sitio.
- Si necesitas actualizarla más rápido, puedes intentar enviar la URL de tu página de inicio a los motores de búsqueda.
Error de robots.txt en la Inspección del sitio de Wix o en Google Search Console
A veces puedes ver errores como Bloqueado por robots.txt en tu informe de Inspección del sitio de Wix o en tu cuenta de Google Search Console.
Si ves un error como este, no necesitas editar tu archivo robots.txt, especialmente si nunca lo has editado antes. En su lugar, debes comprobar tus páginas para ver los siguientes ajustes:
- Se evita que los motores de búsqueda indexen la página en:
- La página está protegida con contraseña
- La página es solo para miembros
Si necesitas actualizar una página, Wix actualiza automáticamente tu robots.txt después de que publiques la página. Si cambias los ajustes de tu sitio, tu archivo robots.txt se actualiza inmediatamente.
Después de realizar un cambio, los motores de búsqueda actualizarán la versión en caché de tu archivo robots.txt la próxima vez que rastreen tu sitio. Si necesitas actualizarlo antes, puedes intentar enviar tu página de inicio a los motores de búsqueda para que se vuelva a indexar.