Generador de robots.txt
Genera tu robots.txt con reglas por bot, sitemap y bloqueo de crawlers de IA. 100% en tu navegador.
Hecho por
Miguel Ángel Colorado Marin (MACM)
Hecho por
Miguel Ángel Colorado Marin (MACM)
Full-Stack Developer · Guadalajara, España
Desarrollo aplicaciones web, herramientas digitales y proyectos completos — desde el diseño hasta el despliegue.
El generador de robots.txt crea el archivo que le dice a los rastreadores web (buscadores, bots de IA) qué partes de tu sitio pueden o no pueden visitar. Elige el modo rápido (permitir todo o bloquear todo) para casos simples, o define reglas personalizadas por User-agent con rutas específicas a permitir o bloquear. Puedes bloquear con un clic los bots de entrenamiento de IA más conocidos (GPTBot de OpenAI, ClaudeBot de Anthropic, CCBot de Common Crawl y más) si no quieres que tu contenido se use para entrenar modelos, añadir la URL de tu sitemap para ayudar a la indexación, y fijar un Crawl-delay si necesitas limitar la frecuencia de rastreo. El resultado se genera al instante, listo para copiar o descargar directamente como robots.txt.
Características
- ✓Modo rápido: permitir o bloquear todo
- ✓Reglas personalizadas por User-agent
- ✓Bloqueo directo de bots de IA conocidos (GPTBot, ClaudeBot, CCBot...)
- ✓Sitemap y Crawl-delay opcionales
- ✓100% en el navegador, sin subidas
¿Cómo generar un robots.txt?
- 1
Elige el modo
Permitir todo, bloquear todo, o reglas personalizadas.
- 2
Añade reglas si hace falta
Rutas a permitir o bloquear por cada User-agent.
- 3
Bloquea bots de IA si quieres
Marca los que no quieras que rastreen tu contenido.
- 4
Descarga el archivo
Súbelo a la raíz de tu dominio como /robots.txt.
Preguntas frecuentes
¿Dónde tengo que subir el archivo?
En la raíz de tu dominio, accesible en tudominio.com/robots.txt — no funciona en ninguna otra ruta.
¿Bloquear un bot de IA garantiza que no use mi contenido?
robots.txt es una petición que los rastreadores respetuosos cumplen voluntariamente, no una barrera técnica real. La mayoría de bots grandes (OpenAI, Anthropic, Common Crawl) sí lo respetan, pero no es una garantía absoluta contra actores que lo ignoren.
¿Se sube información de mi sitio a un servidor?
No, el archivo se genera combinando tus opciones directamente en tu navegador.
Herramientas relacionadas
Incrusta Generador de robots.txt en tu web
Integra Generador de robots.txt en cualquier página web con un simple iframe. Gratis, con atribución a miguelacm.es.
<iframe
src="https://miguelacm.es/embed/robots-txt-generator"
width="100%"
height="700"
frameborder="0"
title="Generador de robots.txt — miguelacm.es"
></iframe>Ver embed en nueva pestaña →