A seção SEO & Distribuição de Conteúdo, no Detalhes do portal, controla 8 arquivos públicos que buscadores, leitores de RSS e agentes de IA usam pra entender e indexar o seu conteúdo. Cada checkbox liga ou desliga um desses arquivos individualmente, e alguns deles têm efeito um sobre o outro. Vale entender o que cada um faz antes de desligar qualquer coisa, porque o efeito nem sempre é só "esconder aquele arquivo".


Como acessar

No painel do portal, acesse Detalhes e role até SEO & Distribuição de Conteúdo. Cada linha mostra o nome da opção, o caminho do arquivo gerado e um botão de atalho pra abrir esse arquivo direto no navegador, útil pra conferir se o que está configurado bate com o que o buscador vai ler.



Robots.txt

Controla a indexação global do portal via /robots.txt. Esse é o único checkbox com efeito em cascata: desligá-lo não desliga só o arquivo robots.txt, ele passa a instruir todo buscador a não indexar nenhuma página do portal (Disallow: /). Os outros 7 checkboxes continuam gerando seus arquivos normalmente, mas praticamente perdem o efeito, porque o portal inteiro já está marcado como bloqueado.

Com o Robots.txt ligado, o arquivo também inclui um bloco específico liberando rastreadores de IA (GPTBot, ChatGPT-User, Claude-Web, Google-Extended, PerplexityBot), e esse bloco só aparece quando o checkbox AI.txt também está ligado.


Sitemap Geral e Google News

Um sitemap é uma lista de páginas do portal em formato que buscadores, como o Google, conseguem ler diretamente, sem precisar navegar link por link pra descobrir o que existe. É o jeito mais rápido de um buscador saber que uma página nova foi publicada e indexá-la mais cedo.

São dois arquivos diferentes, mesmo cobrindo assunto parecido:

  • Sitemap Geral (/sitemap.xml) lista posts, páginas, categorias e autores do portal, mas só inclui na lista os sub-sitemaps que realmente têm conteúdo publicado. Um portal sem colunistas cadastrados, por exemplo, não gera sitemap de autores.
  • Google News (/sitemap-news.xml) é otimizado pro Google Notícias, que só considera conteúdo das últimas 48 horas.

Se os dois estiverem desligados ao mesmo tempo, o /sitemap.xml para de existir e passa a responder como página não encontrada.


RSS, Atom e JSON Feed

Um agregador de notícias é um serviço que junta publicações de vários sites diferentes num só lugar, sem que o leitor precise visitar cada portal individualmente: é assim que apps como Feedly, Inoreader e os leitores de RSS embutidos em navegadores conseguem mostrar as notícias mais recentes de vários portais ao mesmo tempo. Esses agregadores não leem o site como uma pessoa leria: eles leem um desses arquivos de feed, que lista as publicações mais recentes num formato padronizado.

Ter esses arquivos disponíveis significa que o portal pode ser assinado e acompanhado por quem usa esse tipo de ferramenta, sem depender de o leitor lembrar de visitar o site. Também abre a porta pra automações de terceiros (um bot do Telegram que republica manchetes, uma planilha que monitora novidades) que consomem feed em vez de fazer scraping da página.

São três formatos diferentes do mesmo tipo de conteúdo (as publicações mais recentes do portal), cada um pensado pra um consumidor diferente:

  • RSS Feed (/rss.xml) é o formato clássico, lido pela maioria dos agregadores de notícias: Feedly, Inoreader e os leitores de RSS nativos de navegadores como o Vivaldi.
  • Atom Feed (/atom.xml) é uma versão mais moderna do mesmo tipo de feed, usada por alguns agregadores e ferramentas de automação como alternativa ao RSS quando o serviço prefere esse formato.
  • JSON Feed (/feed.json) é um formato leve, voltado a desenvolvedores e aplicativos que consomem o conteúdo do portal programaticamente, mais fácil de processar em código do que XML.

Não há problema em manter os três ligados ao mesmo tempo: eles não competem entre si, só atendem a leitores diferentes.


AI.txt e LLMs.txt

Os dois mais recentes da lista, e os únicos que ainda não são um padrão de verdade. /ai.txt é um manifesto com boas-vindas e regras pra IAs que acessam o portal, e também é o responsável por liberar o bloco de rastreadores de IA dentro do robots.txt, mencionado acima. /llms.txt é um mapa do conteúdo do portal voltado a agentes de IA e LLMs.

Nenhuma grande empresa de IA (OpenAI, Google, Meta) confirma hoje seguir esses arquivos oficialmente. Ter os dois ligados não muda nada na prática agora: é uma preparação pro futuro. Se algum dia os robôs de IA passarem a ler esse tipo de arquivo pra decidir o que indexar ou como citar uma fonte, o portal já está pronto, sem precisar de nenhuma configuração nova.

Por serem só preparação, não há motivo pra desligar nenhum dos dois hoje: o custo de manter ligado é zero, e o ganho aparece só se o cenário mudar.


Quando desligar algo

Na prática, existe só um motivo real pra desligar alguma coisa aqui: você não quer que o portal seja indexado ainda, por exemplo enquanto ele ainda está em fase de testes. Nesse caso, o Robots.txt é o único checkbox que resolve: é o único bloqueio que buscadores e a maioria dos rastreadores realmente respeitam.

Fora esse cenário, não há ganho em desligar nenhum dos outros 7. Cada um atende um consumidor diferente, não custa nada pro portal mantê-los ativos, e desligar um deles só reduz onde o seu conteúdo pode ser encontrado.

Use os botões de atalho de cada linha pra conferir o resultado depois de qualquer mudança: é a forma mais rápida de confirmar que a configuração ficou do jeito que você esperava.