Gerador de robots.txt e de sitemap simples
Monte o arquivo robots.txt e um sitemap.xml a partir de uma lista de endereços. Avisos de erro e download, tudo no seu aparelho.
Passo a passo
- Escolha um modelo de robots.txt ou preencha à mão o que deve ficar de fora.
- Informe o endereço do sitemap, se já tiver um.
- Cole a lista de páginas, uma por linha, para gerar o sitemap.xml.
- Copie ou baixe os dois arquivos.
- Publique-os na raiz do site (seusite.com.br/robots.txt e seusite.com.br/sitemap.xml) e envie o sitemap ao Search Console.
Sobre esta ferramenta
O arquivo robots.txt fica na raiz do site e diz aos robôs dos buscadores quais áreas eles podem visitar. O sitemap.xml é uma lista das páginas que você quer que sejam encontradas. Os dois ajudam o Google e outros buscadores a entender o site, e são simples de criar. Esta ferramenta monta os dois a partir de campos em português, mostra o resultado na hora e deixa você copiar ou baixar os arquivos.
No robots.txt, escolha um modelo para começar (tudo liberado, WordPress, loja virtual) e ajuste as linhas: cada caminho em «Não permitir» pede que os robôs não leiam aquela área, e «Permitir» abre exceções dentro de uma área bloqueada. Você pode incluir o endereço do sitemap e, se quiser, pedir que robôs conhecidos de treinamento de inteligência artificial não usem o conteúdo. Esse pedido é respeitado por quem escolhe respeitar; não é uma barreira técnica. O mesmo vale para os buscadores: robots.txt é um pedido de boa convivência, não uma fechadura.
Atenção a um erro comum: a linha «Disallow: /» sozinha pede que nenhum robô leia o site inteiro, e a página some das buscas com o tempo. A ferramenta avisa quando você usa essa opção. Também não coloque no robots.txt caminhos de áreas sigilosas, porque o arquivo é público e qualquer pessoa pode lê-lo; proteja essas áreas com senha. E lembre que bloquear uma página no robots.txt não a remove do Google se outros sites apontarem para ela; para isso existe a tag noindex.
No sitemap, cole um endereço por linha. A ferramenta confere se cada linha é um endereço válido, remove repetidos, tira o trecho depois do # e ignora endereços de outro domínio, porque um sitemap só pode listar páginas do próprio site. Se você informar uma data, ela entra como última modificação em todas as páginas; use só se for verdade. Depois de publicar os arquivos na raiz do site, avise o Google pelo Search Console. Tudo é gerado no seu aparelho e nada do que você digita é enviado ao portal.
Perguntas frequentes
O robots.txt esconde páginas secretas?
Não. Ele é público e só pede aos robôs que não leiam. Proteja áreas sigilosas com senha.
Qual o tamanho máximo do sitemap?
50.000 endereços por arquivo. A ferramenta corta o excesso e avisa.
Posso bloquear os robôs de inteligência artificial?
Você pode pedir. Os robôs que respeitam o robots.txt obedecem, mas não há garantia para todos.
Onde coloco os arquivos?
Na raiz do domínio, de modo que fiquem em seusite.com.br/robots.txt e seusite.com.br/sitemap.xml.
Outras ferramentas no navegador
- Letras e fontes para Instagram e WhatsAppNegrito, cursiva, riscado, bolhas e outros estilos para copiar e colar.
- Contador de caracteres por redeVeja se o texto cabe na bio, na legenda, no título de busca e no SMS.
- Gerador e conferidor de link com UTMMonte links rastreáveis e confira links de campanha já criados.
- Gerador de meta tags e Open GraphCódigo de meta tags e prévia no Google e no WhatsApp.
- Formatador e validador de JSONValide, formate e minifique JSON com o erro na linha e coluna.
- Testador de expressão regularTeste regex com ocorrências marcadas, grupos e substituição.
- Conversor de timestamp UnixTimestamp Unix em data e hora, e data em timestamp, com fuso.
- Conversor CSV e JSON e visualizador de CSVCSV para JSON, JSON para CSV e tabela do CSV, com ponto e vírgula e aspas.
- Gravador de vozGrave áudio pelo microfone e baixe o arquivo, sem enviar nada.
- Gravador de telaGrave a tela e baixe o vídeo, direto do navegador do computador.
- Texto para vozOuça qualquer texto lido em voz alta, com vozes em português.
- Tarja e borrão em imagemEsconda dados pessoais em foto ou print antes de enviar.
- Texto sobre imagem e criador de memeEscreva texto sobre uma foto e baixe o meme pronto.
- Criador de post simplesPost com texto sobre cor ou foto, nos tamanhos de feed, stories e status.
- Assinatura desenhadaDesenhe a assinatura e baixe em PNG com fundo transparente.
- Bloco de notas e lista de tarefasNotas e tarefas guardadas só no seu aparelho, com backup.
- Teste de tecladoVeja quais teclas funcionam e qual o código de cada uma.
- Teste de câmera e de microfoneConfira câmera e microfone antes da videochamada.
- Teleprompter onlineTexto rolando em velocidade ajustável para ler enquanto grava vídeo.
- Leitor de QR CodeLeia QR Code com a câmera ou por foto, com aviso de segurança.
- Paleta de cores de uma imagem e conta-gotasCores principais de uma foto, com código hexadecimal, e conta-gotas.
- Contador regressivo em tela cheiaContagem regressiva grande, em tela cheia, com alarme no fim.
- Placar simplesPlacar de dois a quatro times, com botões grandes e tela cheia.