Herramienta gratuita

Creador de instrucciones para Google

Q: ¿Dónde debo subirlo?

En la raíz pública del sitio, para que esté disponible como /robots.txt.

Q: ¿Puedo bloquear todo mi sitio?

Sí, pero solo conviene en sitios de prueba que todavía no deban rastrearse.

Generá un archivo robots.txt sencillo para indicar qué partes de tu sitio pueden revisar los buscadores.

Este archivo no elimina páginas de Google ni protege contenido privado. Solo orienta a los rastreadores sobre qué rutas deberían visitar o evitar.

Antes de empezar

¿Para qué sirve esta herramienta?

El archivo robots.txt se coloca en la raíz de un sitio web y contiene instrucciones para los buscadores. Puede indicar qué partes del sitio deberían rastrear, cuáles deberían evitar y dónde se encuentra el sitemap.

https://tusitio.com/robots.txt

Plantillas rápidas

Elegí un punto de partida

La plantilla completa el formulario; podés revisar todo antes de generar.

1. ¿Querés permitir que Google revise tu sitio? Sí, permitir el rastreo general. No, bloquear todo el sitio temporalmente.

2. ¿Qué partes querés evitar que revisen los buscadores?

Estas rutas son orientativas: seleccioná solo las que existan y adaptalas a tu sitio.

Panel de administración /admin/ Área privada de usuarios /cuenta/ Resultados internos de búsqueda /buscar/ Carrito /carrito/ Proceso de pago /checkout/ Páginas temporales o de prueba /pruebas/ Archivos internos /archivos-internos/ Agregar una ruta personalizada

Datos de tu sitio3. ¿Cuál es la dirección de tu sitio?Debe empezar con http:// o https://.

4. ¿Tenés un sitemap?

Sí No No estoy seguro

5. Configuración avanzada Opcional

Agregar reglas para todos los rastreadores. Agregar reglas específicas para Googlebot. Agregar comentarios explicativos dentro del archivo.Demora de rastreo (segundos) Opcional y educativaGoogle no respeta la directiva Crawl-delay; otros rastreadores podrían interpretarla.

Vista previa

Tu archivo robots.txt

Explicación línea por línea

Advertencias detectadas

Guía rápida

¿Qué significa cada regla?

User-agent: Indica a qué rastreador se aplican las instrucciones. El asterisco representa a todos.
Allow: Señala una ruta que el rastreador puede visitar.
Disallow: Pide al rastreador que no visite una ruta determinada.
Sitemap: Muestra dónde está la lista de páginas importantes del sitio.

Importante: Bloquear una ruta en robots.txt no garantiza que desaparezca de Google. Para retirar una página pueden ser necesarias otras medidas, como noindex, protección con contraseña o eliminación de la URL.

Preguntas frecuentes

Lo esencial sobre robots.txt

¿Qué es un archivo robots.txt?

Es un archivo de texto con indicaciones para los rastreadores de buscadores.

¿Dónde debo subirlo?

En la raíz pública del sitio, para que se vea en tudominio.com/robots.txt.

¿Sirve para eliminar una página de Google?

No. Bloquear el rastreo no garantiza que una URL desaparezca del buscador.

¿Puedo bloquear todo mi sitio?

Sí, pero usalo únicamente en sitios de prueba que todavía no deban rastrearse.

¿Qué pasa si no tengo robots.txt?

Los buscadores normalmente intentarán rastrear las rutas públicas que encuentren.

¿Cómo sé si mi archivo funciona?

Visitá /robots.txt en tu dominio y comprobá rutas importantes con las herramientas del buscador.