Arquivo encontrado
Identificamos se o robots.txt está disponível na raiz do domínio.
VERIFICADOR DE ROBOTS.TXT
Confira se o robots.txt está bloqueando páginas importantes do seu site.
Analise o site e veja se o robots.txt foi encontrado e respeitado durante o rastreamento.
✓ Sem cadastro
✓ Gratuito
✓ Feito para o Brasil
FERRAMENTA GRÁTIS
Verificar robots.txt
Digite o domínio. A auditoria respeita o robots.txt e mostra páginas que não puderam ser rastreadas.
ENTENDA O RESULTADO
Robots.txt controla rastreamento, não indexação diretamente.
O arquivo robots.txt orienta crawlers sobre caminhos que podem ou não ser acessados. Bloquear uma URL ali não é o mesmo que aplicar noindex e pode esconder informações necessárias para avaliar a página.
Regras respeitadas
O crawler não força acesso a áreas bloqueadas pelo site.
Contexto no relatório
Você consegue diferenciar páginas não rastreadas por regra de outros erros técnicos.
COMO USAR
Use a ferramenta em poucos passos.
Informe ou cole os dados
Use o campo acima para inserir o site ou as informações que deseja revisar.
Confira o resultado
A ferramenta mostra a prévia ou inicia a auditoria necessária para esta verificação.
Corrija e teste novamente
Ajuste o site e repita a verificação para confirmar se o problema foi resolvido.
DÚVIDAS FREQUENTES
Perguntas sobre VERIFICADOR DE ROBOTS.TXT.
Robots.txt remove uma página do Google?
Não necessariamente. Ele controla o rastreamento. Para evitar indexação, normalmente é usado noindex em uma página acessível ao crawler.
Onde fica o robots.txt?
O endereço padrão é /robots.txt na raiz do domínio.
Posso bloquear CSS e JavaScript?
Em geral não é recomendado bloquear recursos necessários para o Google renderizar e entender a página.
SUPORTE TÉCNICO • JUPITER TI
Encontrou um problema que precisa de alguém para resolver?
Se a auditoria apontou lentidão, erro 5xx, SSL, DNS, servidor, Docker ou infraestrutura, a Jupiter TI pode analisar o ambiente e orientar o próximo passo.
Jupiter TI
Linux • Cloud • Automação