# Infrastructure — robots.txt
#
# Aberto para inteligência artificial, de propósito.
#
# Este site diz que a infraestrutura aqui é operada por agentes. Bloquear
# crawler de IA na porta contradiria a frase — e, pior, tiraria o Infrastructure das
# respostas exatamente de quem faz a pergunta que nos interessa ("qual
# infraestrutura brasileira meu agente consegue operar?").
#
# Os bots abaixo estão nomeados um a um em vez de cobertos pelo `*` porque
# permissão explícita é declaração; ausência de bloqueio é só descuido que
# funcionou. Quando aparecer um crawler novo, ele entra nesta lista.
#
# A fonte da verdade para agentes é /llms.txt, não o HTML renderizado:
# ele documenta os servidores MCP, o OAuth 2.1 e os limites. Cada produto tem
# o seu em /products/<slug>/llms.txt.
#
# Este arquivo passou a valer para os sete produtos em 2026-09-12, quando os
# sites deles viraram rotas daqui. Três — Hoster, Payments e Messages —
# bloqueavam GPTBot no próprio robots.txt enquanto convidavam agente no
# llms.txt da MESMA pasta. A unificação desfaz a contradição por construção:
# há um robots.txt só, e ele é este.

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /dashboard/

# ─── Treinamento e indexação de IA ───────────────────────────
# OpenAI
User-agent: GPTBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: OAI-SearchBot
Allow: /

# Anthropic
User-agent: ClaudeBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: anthropic-ai
Allow: /

# Google
User-agent: Google-Extended
Allow: /

# Perplexity
User-agent: PerplexityBot
Allow: /
User-agent: Perplexity-User
Allow: /

# Common Crawl, Meta, Apple, ByteDance, Amazon, Mistral, Cohere, You.com
User-agent: CCBot
Allow: /
User-agent: meta-externalagent
Allow: /
User-agent: FacebookBot
Allow: /
User-agent: Applebot
Allow: /
User-agent: Applebot-Extended
Allow: /
User-agent: Bytespider
Allow: /
User-agent: Amazonbot
Allow: /
User-agent: MistralAI-User
Allow: /
User-agent: cohere-ai
Allow: /
User-agent: YouBot
Allow: /

# Sitemap location
Sitemap: https://myinfrastructure.click/sitemap.xml