Más de 15 rastreadores de IA respetan robots.txt de forma diferente. Genera uno que los gestione a todos explícitamente. 0 registros, 100% del lado del cliente.
En 2026, tu sitio es rastreado por decenas de bots de IA — GPTBot (OpenAI), ClaudeBot (Anthropic), PerplexityBot, Google-Extended, ByteSpider (TikTok) y una larga cola de scrapers menos educados.
User-agent: * genérico.Esta herramienta genera un robots.txt limpio con los 15+ rastreadores más relevantes de 2026. Elige allow/block por bot. Añade línea de sitemap. Copia o descarga. Listo en 30 segundos.
robots.txt es una de las 11+ señales que usan los agentes de IA. ¿Quieres ver el panorama completo? Ejecuta la auditoría gratuita →