Definición
La respuesta canónica.
Un rastreador de IA recupera páginas web con un propósito concreto, como indexar para búsqueda, entrenar un modelo o extraer contenido pedido por un usuario. OAI-SearchBot y PerplexityBot sirven a la búsqueda; GPTBot y ClaudeBot atañen al entrenamiento. Google-Extended es un token de política de robots.txt, no un agente de usuario de rastreador aparte.
Ejemplo concreto
En la práctica.
Un sitio puede permitir OAI-SearchBot y tomar una decisión aparte sobre GPTBot. Revise juntos el archivo robots.txt, las respuestas del servidor y la identidad verificada del operador. Bloquear la recuperación directa puede limitar el acceso a las fuentes, pero una marca aún puede aparecer por otras fuentes o por datos de índice ya existentes.
Dónde ocurre este trabajo: Optimización para búsqueda con IA
¿Es esta tu restricción?
La llamada de auditoría gratuita de 30 minutos te lo dice, en vivo, sobre tu propio embudo.
Reservar una auditoría de crecimiento →