¿Cómo configurar Robots.txt para permitir o impedir el rastreo de tu sitio web?

La aplicación Robots.txt te permite definir qué dirección de tu tienda puede ser rastreada por Google y otros motores de búsqueda.

Esta configuración también puede ayudarte a resolver consultas frecuentes como:

• ¿Cómo hacer que mi tienda aparezca en Google?
• ¿Cómo quitar el subdominio mimarca.nextiendas.com de Google?
• ¿Cómo evitar que Google muestre mi sitio con dos direcciones diferentes?
• ¿Cómo hacer para que Google rastree solamente mi dominio propio?
• ¿Cómo desvincular de los buscadores el subdominio gratuito de Nextiendas?

¿Qué es el archivo robots.txt?

El archivo robots.txt contiene instrucciones dirigidas a los robots de los motores de búsqueda. Estas instrucciones indican qué direcciones pueden visitar o rastrear dentro de un sitio web.

Es importante diferenciar dos conceptos:

• Rastreo: el motor de búsqueda visita y analiza las páginas del sitio.
• Indexación: el motor de búsqueda incorpora esas páginas a sus resultados.

El archivo robots.txt controla principalmente el rastreo. Por este motivo, seleccionar “NO” no elimina de forma inmediata una dirección que ya aparece en Google. Google aclara que una URL bloqueada mediante robots.txt todavía podría aparecer en los resultados si ya era conocida o si existen enlaces externos hacia ella.

IMPORTANTE: Esta configuración no desactiva el sitio web ni impide que una persona ingrese mediante su dirección. Solamente proporciona instrucciones a los motores de búsqueda que respetan el archivo robots.txt. Tampoco debe utilizarse como una medida de seguridad o privacidad.

¿Qué direcciones puedes configurar?

Las opciones disponibles dependerán de si utilizas solamente el subdominio gratuito proporcionado por Waclis o si también tienes conectado un dominio propio.

Subdominio gratuito de Waclis

Todos los sitios cuentan con una dirección gratuita similar a la siguiente:

https://mimarca.nextiendas.com

Puedes decidir si deseas permitir o impedir que los motores de búsqueda rastreen esta dirección.

Dominio propio

Cuando conectas un dominio propio, por ejemplo:

https://www.mimarca.com

La aplicación también mostrará una configuración independiente para ese dominio.

De esta manera, puedes permitir que Google rastree tu dominio propio y, al mismo tiempo, evitar que continúe rastreando el subdominio gratuito de Nextiendas.

¿Cómo configurar Robots.txt?

1. Ingresar a la aplicación

Ingresa al Panel de Autogestión de tu sitio web y abre la aplicación Robots.txt.

Dentro de la pantalla encontrarás las direcciones disponibles para tu tienda.

2. Configurar el subdominio gratuito

En la sección Subdominio, el sistema mostrará una pregunta similar a la siguiente:

¿Deseas que los motores de búsqueda accedan a “https://mimarca.nextiendas.com”?

Selecciona una de estas opciones:

“SI”

Permite que los motores de búsqueda rastreen el subdominio gratuito.

Esta es la configuración recomendada cuando todavía no tienes conectado un dominio propio y deseas que tu sitio pueda aparecer en Google u otros buscadores.

Permitir el rastreo no garantiza que Google incluya inmediatamente el sitio en sus resultados. Cada motor de búsqueda decide cuándo rastrear e indexar una página.

“NO”

Indica a los motores de búsqueda que no deben rastrear el subdominio gratuito.

Esta opción es recomendable cuando:

• Ya tienes conectado un dominio propio.
• Deseas que solamente tu dominio propio aparezca en Google.
• El subdominio gratuito todavía aparece en los resultados de búsqueda.
• Quieres evitar que los buscadores encuentren dos direcciones con el mismo contenido.
• No deseas promocionar ni posicionar el subdominio de Nextiendas.

Seleccionar “NO” no elimina el subdominio ni impide ingresar a él directamente. La dirección continuará funcionando, pero se solicitará a los motores de búsqueda que no la rastreen.

3. Configurar el dominio propio

Si tienes un dominio propio conectado, aparecerá una segunda sección denominada Dominio.

El sistema mostrará una pregunta similar a la siguiente:

¿Deseas que los motores de búsqueda accedan a “https://www.mimarca.com”?

Selecciona la opción correspondiente.

“SI”

Permite que los motores de búsqueda rastreen tu dominio propio.

Esta es la opción recomendada para un sitio publicado que deseas posicionar y mostrar en Google.

“NO”

Indica a los motores de búsqueda que no deben rastrear el dominio propio.

Utiliza esta opción solamente cuando no deseas que el sitio sea rastreado, por ejemplo, durante determinadas pruebas o antes de su publicación definitiva.

4. Aplicar los cambios

Selecciona “SI” o “NO” en cada menú desplegable.

Si fuera necesario, utiliza el botón con el icono de lápiz ubicado junto a cada selector para habilitar la edición.

El sistema informa que los cambios se guardan automáticamente. Al finalizar, haz clic en Actualizar para aplicar la configuración.

Configuración automática al conectar un dominio propio

Cuando conectas un dominio propio por primera vez, Waclis configura automáticamente las siguientes opciones:

De esta manera, los motores de búsqueda pueden rastrear el dominio propio y dejan de recibir permiso para rastrear el subdominio gratuito.

Esta configuración ayuda a evitar que dos direcciones diferentes del mismo sitio compitan o aparezcan simultáneamente en los resultados de búsqueda.

Configuración recomendada según cada caso

Utilizo solamente el subdominio gratuito

Configura:

• Subdominio: “SI”.
• La opción de dominio propio no se mostrará.

Esta configuración permite que los motores de búsqueda rastreen tu sitio mediante la dirección proporcionada por Waclis.

Tengo un dominio propio conectado

Configura:

• Subdominio: “NO”.
• Dominio propio: “SI”.

Esta es la configuración recomendada para que los buscadores utilicen tu dominio propio como dirección principal.

No deseo que ninguna dirección sea rastreada

Configura:

• Subdominio: “NO”.
• Dominio propio: “NO”.

Recuerda que esto no protege el sitio con contraseña ni impide el acceso directo.

¿Cómo quitar el subdominio de Nextiendas de Google?

Si tu sitio aparece en Google con una dirección como:

https://mimarca.nextiendas.com

y ya tienes conectado un dominio propio, sigue estos pasos.

1. Desactivar el rastreo del subdominio

Ingresa a la aplicación Robots.txt y configura:

• Subdominio: “NO”.
• Dominio propio: “SI”.

Luego, haz clic en Actualizar.

2. Esperar la actualización de los buscadores

La modificación no elimina inmediatamente un resultado que ya estaba registrado.

Google debe volver a procesar la dirección y actualizar su información. Este proceso depende de Google y no tiene un plazo exacto.

Además, Google explica que bloquear una dirección mediante robots.txt no es, por sí solo, un método garantizado para eliminar definitivamente una URL que ya se encontraba indexada.

3. Solicitar asistencia si el subdominio continúa apareciendo

Si después de modificar la configuración el subdominio continúa apareciendo en Google, comunícate con el equipo de soporte de Waclis e informa:

• La dirección completa del subdominio.
• El dominio propio actualmente conectado.
• Una captura del resultado que aparece en Google.
• Las palabras utilizadas para realizar la búsqueda.

Por ejemplo:

• Subdominio: https://mimarca.nextiendas.com
• Dominio actual: https://www.mimarca.com

¿Quién debe solicitar la retirada en Google?

Para utilizar la herramienta de retiradas de Google Search Console es necesario ser propietario verificado de la dirección correspondiente.

Una propiedad de dominio de Search Console puede incluir todos los subdominios del dominio principal. Por ejemplo, una propiedad verificada para nextiendas.com puede incluir direcciones como mimarca.nextiendas.com.

Por este motivo, la retirada acelerada de un subdominio gratuito debe ser gestionada por Waclis o por un usuario al que Waclis haya proporcionado acceso a la propiedad correspondiente de Google Search Console.

El cliente debe:

1. Configurar el subdominio en “NO”.
2. Mantener el dominio propio en “SI”.
3. Enviar la dirección exacta al soporte de Waclis si todavía aparece en Google.

El equipo de Waclis podrá revisar el caso y, cuando corresponda, solicitar la ocultación temporal desde Google Search Console.

Procedimiento que realiza el equipo de soporte de Waclis

Cuando sea necesario acelerar la retirada de un subdominio, el equipo autorizado realizara las siguientes tareas:

1. Ingresar a Google Search Console.
2. Seleccionar la propiedad verificada correspondiente a nextiendas.com.
3. Ingresar a Retiradas.
4. Abrir la pestaña de Retiradas temporales.
5. Seleccionar Nueva solicitud.
6. Elegir Retirar URL temporalmente.
7. Seleccionar la opción para retirar todas las direcciones que comiencen con un prefijo.

8. Ingresar la dirección completa, incluyendo la barra final:

   https://mimarca.nextiendas.com/

9. Revisar la información y enviar la solicitud.

Google permite bloquear temporalmente una URL específica o todas las URL que comiencen con un mismo prefijo. La solicitud de retirada temporal suele mantenerse durante aproximadamente seis meses y no constituye, por sí sola, una eliminación permanente.

Preguntas frecuentes

¿Seleccionar “SI” hace que mi sitio aparezca inmediatamente en Google?

No. La opción permite el rastreo, pero Google decide cuándo visitar, procesar e incorporar cada página a sus resultados.

¿Seleccionar “NO” elimina inmediatamente mi sitio de Google?

No. Evita o limita futuros rastreos, pero una dirección que ya estaba indexada puede continuar apareciendo durante un tiempo.

¿Mi sitio deja de funcionar cuando selecciono “NO”?

No. El sitio continúa funcionando y puede visitarse ingresando directamente su dirección.

¿Debo configurar el dominio propio y el subdominio en “SI”?

No es recomendable cuando ambos muestran el mismo contenido. Si tienes un dominio propio, normalmente debes configurar:

• Dominio propio: “SI”.
• Subdominio gratuito: “NO”.

¿Qué sucede si todavía no tengo un dominio propio?

Solamente se mostrará la configuración correspondiente al subdominio gratuito de Waclis.

Por defecto, estará configurado en “SI” para permitir que los motores de búsqueda rastreen tu sitio.

¿Puedo volver a permitir el rastreo más adelante?

Sí. Ingresa nuevamente a la aplicación, cambia la opción a “SI” y haz clic en Actualizar.

El motor de búsqueda deberá volver a visitar el sitio antes de reflejar la modificación.