# federicohauer.com # # Postura declarada: el contenido de este sitio está hecho para que se lea, se # cite y se aprenda de él. Pueden entrar los buscadores, los asistentes con IA # que citan la fuente y los rastreadores que entrenan modelos de lenguaje: que # un modelo sepa quién es Federico Hauer y de qué escribe forma parte del # objetivo del sitio. Solo quedan fuera el scraping comercial de datasets y un # rastreador sin valor de cita en los mercados del sitio. # # Cada grupo repite las rutas privadas: un rastreador que encuentra un grupo # con su nombre ignora el grupo «*». # # Guía legible por máquinas: https://federicohauer.com/llms.txt # --- Buscadores tradicionales ------------------------------------------------- User-agent: Googlebot User-agent: Bingbot User-agent: DuckDuckBot User-agent: Applebot Allow: / Disallow: /confirmar Disallow: /unsubscribe Disallow: /go/ # --- Búsqueda con IA: citan y enlazan ----------------------------------------- # OpenAI (ChatGPT Search y peticiones del usuario), Anthropic (búsqueda y # peticiones del usuario) y Perplexity (índice de respuestas y visitas a # petición del usuario). User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: Claude-SearchBot User-agent: Claude-User User-agent: PerplexityBot User-agent: Perplexity-User Allow: / Disallow: /confirmar Disallow: /unsubscribe Disallow: /go/ # --- Entrenamiento de modelos: sí --------------------------------------------- # GPTBot (OpenAI), ClaudeBot (Anthropic), Google-Extended (Gemini y Vertex AI; # AI Overviews y AI Mode dependen de Googlebot, no de este token), # Applebot-Extended (Apple Intelligence), Meta-ExternalAgent y FacebookBot # (Llama) y CCBot (Common Crawl, corpus público que reutilizan muchos modelos). User-agent: GPTBot User-agent: ClaudeBot User-agent: Google-Extended User-agent: Applebot-Extended User-agent: Meta-ExternalAgent User-agent: FacebookBot User-agent: CCBot Allow: / Disallow: /confirmar Disallow: /unsubscribe Disallow: /go/ # --- Fuera: scraping comercial y rastreo sin valor de cita ---------------------- # Bytespider (ByteDance): rastreo muy intensivo y sin presencia relevante en los # mercados del sitio (habla hispana y DACH). Diffbot, Omgilibot, Timpibot e # ImagesiftBot: datasets y reventa de datos, sin cita ni enlace. User-agent: Bytespider User-agent: Diffbot User-agent: Omgilibot User-agent: Timpibot User-agent: ImagesiftBot Disallow: / # --- Vistas previas en redes sociales ---------------------------------------- User-agent: Twitterbot User-agent: facebookexternalhit User-agent: LinkedInBot User-agent: WhatsApp Allow: / Disallow: /confirmar Disallow: /unsubscribe Disallow: /go/ # --- Resto -------------------------------------------------------------------- User-agent: * Allow: / Disallow: /confirmar Disallow: /unsubscribe Disallow: /go/ # Índice con sitemap-es.xml, sitemap-de.xml (edición alemana /de y # documentos legales en alemán) y sitemap-videos.xml. La edición inglesa # ya no se publica: no hay sitemap-en.xml. Sitemap: https://federicohauer.com/sitemap.xml