# Cada grupo abaixo é auto-contido de propósito: um crawler obedece apenas ao
# grupo que casa melhor com o nome dele e ignora o grupo `*` por completo.
# Por isso os Disallow se repetem em todos — sem isso os bots nomeados
# entrariam em /go/ e nas rotas internas.
#
# As rotas bloqueadas são handlers do Next, não conteúdo. /api (sem barra) é a
# documentação pública da API e continua liberada — por isso os Disallow são
# por caminho exato em vez de um prefixo /api/, que confundia a leitura.

User-agent: *
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# ─── Buscadores com IA ────────────────────────────────────────────────
# ChatGPT, Bing e Copilot respondem por ~46% do tráfego; Google por ~5%.
# Estes grupos existem pra garantir o acesso mesmo que algum proxy ou CDN
# volte a injetar um robots.txt gerenciado bloqueando crawler de IA.

# OpenAI — índice de busca (é o que o ChatGPT cita nas respostas)
User-agent: OAI-SearchBot
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# OpenAI — busca iniciada pelo usuário
User-agent: ChatGPT-User
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# OpenAI — coleta para treino
User-agent: GPTBot
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Anthropic — crawler atual
User-agent: ClaudeBot
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Anthropic — busca iniciada pelo usuário
User-agent: Claude-User
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Anthropic — índice de busca
User-agent: Claude-SearchBot
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Perplexity — índice
User-agent: PerplexityBot
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Perplexity — busca iniciada pelo usuário
User-agent: Perplexity-User
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Google — Gemini e AI Overviews
User-agent: Google-Extended
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Meta AI
User-agent: meta-externalagent
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

# Apple Intelligence
User-agent: Applebot-Extended
Allow: /
Disallow: /api/status
Disallow: /api/revalidate
Disallow: /api/trpc/
Disallow: /go/

Sitemap: https://www.falazuki.com/sitemap.xml