Enviar el archivo robots.txt actualizado a Google

Con la función Enviar del Probador de robots.txt, puedes actualizar fácilmente tu archivo robots.txt y pedirle a Google que lo rastree para que tenga en cuenta los cambios lo antes posible. Para avisar a Google de los cambios que hayas hecho en tu archivo robots.txt, sigue estos pasos:

  1. En la esquina inferior derecha del editor de robots.txt, haz clic en Enviar. Se abrirá el cuadro de diálogo Enviar.
  2. Descarga el código editado de robots.txt de la página Probador de robots.txt haciendo clic en el botón Descargar del cuadro de diálogo Enviar.
  3. Sube tu nuevo archivo robots.txt a la raíz de tu dominio como archivo de texto llamado "robots.txt" (la URL del archivo debe ser /robots.txt).

    Si no tienes permiso para subir archivos a la raíz de tu dominio, pide al administrador del dominio que haga los cambios.

    Por ejemplo, si la página principal de tu sitio está en subdomain.example.com/site/example/, es probable que no puedas actualizar el archivo robots.txt situado en subdomain.example.com/robots.txt. En este caso, deberías pedir al propietario de example.com/ que haga los cambios necesarios en el archivo robots.txt.

  4. Haz clic en Ver la versión subida para comprobar que la versión del archivo robots.txt que está publicada sea la que quieres que Google rastree.
  5. Haz clic en Enviar para avisar a Google de que el archivo robots.txt ha cambiado y solicitarle que lo rastree.
  6. Para comprobar que Google haya rastreado correctamente la versión más reciente, actualiza la página del navegador donde tienes abierto el editor de la herramienta y confirma que el código de robots.txt publicado sea el que te interesa. Después de actualizar la página, también puedes hacer clic en el menú desplegable situado encima del editor de texto para consultar la marca de tiempo del momento en que Google vio por primera vez la versión más reciente de tu archivo robots.txt.