# Política de rastreamento do Namandu: tudo liberado, inclusive treino de IA.
#
# ─── POR QUE ESTA POLÍTICA MORA AQUI E NÃO NO CLOUDFLARE ────────────────────
#
# O Cloudflare oferece as mesmas decisões como botões no painel. Em 28/07/2026 a
# regra gerenciada "Block AI training crawlers" estava ligada e bloqueava o
# GOOGLEBOT DE VERDADE — evento registrado: IP 192.178.6.105, ASN 15169 (Google
# LLC), user agent legítimo do Googlebot-Smartphone, host www.namandu.org,
# caminho "/", ação Block. A home devolvendo 403 para o Google, e ninguém foi
# notificado: apareceu porque alguém foi olhar o Search Console.
#
# Não foi acidente da regra: é o que ela necessariamente faz. O `Google-Extended`
# NÃO é um rastreador — não tem user agent nem faixa de IP própria. É apenas um
# token de robots.txt que o Google honra para decidir se o conteúdo já rastreado
# pode ir para o treino do Gemini. Quem busca as páginas é sempre o Googlebot, o
# mesmo da busca. Uma regra de firewall que tenta bloquear "o rastreador de
# treino do Google" não tem o que mirar além do próprio Googlebot.
#
# Ou seja: preferência sobre treino só se expressa por robots.txt, e tentar
# aplicá-la por firewall custa a indexação inteira. Aqui a política fica
# versionada, passa por PR e tem o porquê escrito. Mantenha a configuração de
# robots.txt do Cloudflare DESATIVADA — quando ligada, ela sobrescreve este
# arquivo na borda, que foi exatamente como o incidente aconteceu.
#
# ─── A DECISÃO ──────────────────────────────────────────────────────────────
#
# Busca, citação e treino: todos permitidos.
#
# O raciocínio: o Namandu é uma marca nova. Uma marca conhecida é mencionada de
# qualquer jeito; uma desconhecida só entra no espaço de respostas de uma IA se
# estiver nos dados. Presença em peso de modelo não depende de o site estar no ar
# nem de o rastreador ter passado recentemente — e nesta fase isso vale mais que
# o controle que se perde.
#
# O que se perde, registrado para a reavaliação: conteúdo em peso de modelo não
# sai de lá. As páginas de /triagem-* foram calibradas com cuidado — descrevem o
# instrumento sem atribuir condição, põem o CVV acima da dobra, enquadram o item
# 9 antes de mostrá-lo — e nada dessa estrutura viaja junto quando o texto é
# reproduzido por um modelo. Vale reavaliar quando houver dados de Search Console
# e de citação em IA para comparar os dois canais.
#
# Nota separada, que não é preferência e sim direito de terceiro: o WHO-5 é obra
# protegida e o site o reproduz na íntegra em /triagem-bem-estar-who5.

# ── Sinal declarativo, lido por quem o suporta ──────────────────────────────
User-agent: *
Content-Signal: search=yes, ai-train=yes, use=reference
Allow: /

# ── Buscadores ─────────────────────────────────────────────────────────────
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: DuckDuckBot
Allow: /

User-agent: Applebot
Allow: /

# ── Prévia de link em redes sociais e mensageiros ───────────────────────────
User-agent: Twitterbot
Allow: /

User-agent: facebookexternalhit
Allow: /

User-agent: LinkedInBot
Allow: /

User-agent: WhatsApp
Allow: /

# ── Busca e citação por IA ──────────────────────────────────────────────────
# Indexam para responder perguntas com fonte. É como o Namandu aparece quando
# alguém pergunta a uma IA sobre triagem, ansiedade ou psicólogo online — e é o
# único dos dois canais de IA que devolve um link, logo, uma visita.
User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

# ── Treino de modelo ────────────────────────────────────────────────────────
# Listados explicitamente, embora `User-agent: *` já os cubra. O ponto é que a
# permissão seja uma linha visível num diff: se algum dia isto for revertido,
# que seja apagando um nome, não por omissão silenciosa.
#
# `Google-Extended` e `Applebot-Extended` não rastreiam nada — são tokens que
# Google e Apple honram sobre conteúdo que os buscadores deles já leram.
User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: CCBot
Allow: /

User-agent: meta-externalagent
Allow: /

# Bytespider entra na lista por coerência, não por efeito: ele tem histórico de
# ignorar robots.txt. Se um dia virar problema de carga, o instrumento é o
# firewall — que para ESTE caso é o certo, porque não há busca legítima do mesmo
# rastreador para preservar.
User-agent: Bytespider
Allow: /

Sitemap: https://www.namandu.org/sitemap.xml
Sitemap: https://www.namandu.org/blog/sitemap.xml
Sitemap: https://www.namandu.org/noticias/sitemap.xml