Lo que aprenderás
Los rastreadores no tienen todos el mismo propósito. Algunos descubren o indexan, otros generan vistas previas y otros pueden usarse para entrenamiento o respuesta. Una política responsable parte de conocer qué información pública quieres que sea accesible y qué consecuencia aceptas.
El límite que debes tener claro
La decisión de acceso
La política debe explicar qué acceso permites, por qué y cómo la revisarás cuando cambien tus necesidades.
Conceptos clave
Distingue funciones
Separa rastreo para búsqueda, vista previa, entrenamiento, analítica y respuesta cuando el proveedor lo haga posible.
Evalúa información y riesgo
Considera licencia, datos personales, contenido premium, recursos de soporte, carga del servidor y valor de descubrimiento.
Documenta la decisión
Anota proveedor, directiva, alcance, dueño, motivo, fecha y señal que te hará revisar la política.
Taller guiado
Política de acceso para rastreadores
Ejemplo: base de conocimiento
Una empresa deja abiertos artículos de ayuda, pero tiene documentación contractual y material de formación de pago en rutas públicas. Clasifica el contenido, corrige controles de acceso y define una política para bots documentada con legal y soporte.
Construye la entrega
Haz inventario de contenido
Clasifica información pública, restringida, licenciada, sensible y temporal.
Consulta documentación actual
Revisa las directivas y controles que cada proveedor reconoce.
Define una política mínima
Permite o limita por motivo claro, no por moda.
Monitoriza impacto
Revisa registros, carga, incidentes, usos y cambios de política.
El encargo
Crea un registro de cuatro tipos de contenido: valor público, riesgo, rastreadores relevantes, regla actual, dueño y fecha de revisión.
Revisión antes de cerrar
- Diferencio propósitos de rastreo.
- Mi política considera contenido, licencia y operación.
- Uso documentación oficial actualizada.
- Registro y reviso cada decisión.
Guía actual
Define la política de rastreo según el propósito
Búsqueda, entrenamiento y recuperación solicitada por un usuario no son lo mismo. Decide y prueba cada caso por separado.
- Googlebot controla el rastreo para Google Search; Google-Extended cubre otros usos de IA de Google y no desactiva AI Overviews o AI Mode.
- En OpenAI, OAI-SearchBot se relaciona con la búsqueda, GPTBot con posible entrenamiento y ChatGPT-User con visitas solicitadas por el usuario.
- Robots no es control de acceso. Protege información privada o regulada con autenticación y autorización.
Compruébalo antes de publicar
- La política nombra agente, propósito y rutas.
- Las páginas públicas importantes siguen accesibles.
- Cada cambio se prueba en robots, CDN o WAF, cabeceras y logs.
Laboratorio de decisión · 20–30 minutos
Convierte la lección en una decisión defendible
No cierres la lección con una lista de ideas. Deja una decisión, la prueba que usarás para revisarla y el límite que evita prometer más de lo que sabes. Ese registro será una pieza del proyecto final del curso.
Decisión
Decide qué rastreadores y usos permites según el valor público del contenido y las políticas del negocio.
Evidencia mínima
Conserva inventario de agentes, propósito declarado, reglas aplicadas, registros y revisión legal o de producto.
Atajo que debes rechazar
Copiar una lista de bloqueos sin entender qué acceso afecta búsqueda, entrenamiento, recuperación o funciones del producto.
Haz una prueba pequeña antes de ampliar el trabajo
- Elige una muestra que puedas revisar hoy. Anota de dónde procede, cuándo la recogiste y qué parte de la decisión puede respaldar.
- Escribe la decisión en una frase. Separa lo que observaste de lo que todavía es una hipótesis y nombra la siguiente comprobación.
- Pide a otra persona que repita la revisión con tu registro. Si no puede llegar a una conclusión razonable, falta contexto o la evidencia no es suficiente.
Comprobación de criterio: un equipo propone este atajo — Copiar una lista de bloqueos sin entender qué acceso afecta búsqueda, entrenamiento, recuperación o funciones del producto.
Respuesta razonada: No debería aprobarse así. Vuelve a la decisión que la lección intenta resolver y exige una prueba que otra persona pueda revisar.
Qué pedir: Conserva inventario de agentes, propósito declarado, reglas aplicadas, registros y revisión legal o de producto. Después registra qué cambiaría tu decisión y qué resultado no puedes atribuir todavía.
Añádelo a tu dossier final
Crea una ficha con cuatro campos: decisión, evidencia, límite y próximo paso. Incluye el enlace o archivo de origen y una fecha de revisión. Al final del curso podrás ordenar estas fichas por dependencia y convertirlas en una hoja de ruta explicable.
Revisión rápida
- La decisión responde a una necesidad real, no a una métrica aislada.
- La evidencia tiene fuente, fecha y contexto suficiente para repetirse.
- El límite deja claro qué no demuestra todavía el trabajo.
Progreso de la lección
¿Terminaste esta lección?
Guarda tu avance en este dispositivo para retomar el curso donde lo dejaste.
Aún no está marcada como completada.
Pon esta lección en práctica.
Crea una cuenta gratuita de Spacebrain y organiza tu trabajo SEO con los proveedores de datos que elijas.