Log In Sign Up

emprestimonegativados.com.br
robots.txt

Robots Exclusion Standard data for emprestimonegativados.com.br

Resource Scan

Scan Details

Site Domain emprestimonegativados.com.br
Base Domain emprestimonegativados.com.br
Scan Status Ok
Last Scan2025-05-26T15:00:14+00:00
Next Scan 2025-06-02T15:00:14+00:00

Last Scan

Scanned2025-05-26T15:00:14+00:00
URL https://emprestimonegativados.com.br/robots.txt
Domain IPs 177.234.150.58
Response IP 177.234.150.58
Found Yes
Hash e85ce065e6020899f6e3e0296b750dd5ac20d20a0e3218ac439757952d55acdf
SimHash 58798d53e38a

Groups

*

Rule Path
Disallow
Disallow /wp-admin/
Disallow /wp-login.php
Disallow /wp-register.php
Disallow /cart/
Disallow /checkout/
Disallow /my-account/
Disallow /cgi-bin/
Disallow /*?replytocom
Disallow /*?s=
Disallow /*?orderby=
Disallow /*?filter_

googlebot

Rule Path
Allow /

googlebot-image

Rule Path
Allow /

googlebot-mobile

Rule Path
Allow /

ahrefsbot

Rule Path
Disallow /

semrushbot

Rule Path
Disallow /

mj12bot

Rule Path
Disallow /

dotbot

Rule Path
Disallow /

bingbot

No rules defined. All paths allowed.

Other Records

Field Value
crawl-delay 10
Back to top

Other Records

Field Value
sitemap https://emprestimonegativados.com.br/sitemap_index.xml
Back to top

Comments

  • robots.txt para https://emprestimonegativados.com.br/
  • Versão completa e otimizada para SEO e Googlebot
  • Permite acesso total para todos os robôs
  • Evita indexação de páginas administrativas e privadas (ajuste conforme necessário)
  • Bloqueia parâmetros comuns que não precisam ser rastreados (ajuste se usar parâmetros diferentes)
  • Direciona para o sitemap principal (importante para SEO)
  • Configurações para Googlebot
  • Configurações para Googlebot-Image (permite rastrear imagens)
  • Configurações para Googlebot-Mobile (permite rastrear versão mobile)
  • Bloqueia bots indesejados conhecidos para evitar spam e scraping (exemplos)
  • Instruções gerais adicionais
  • Crawl-delay pode ser ajustado se tiver servidor limitado (exemplo para Bing)
  • Fim do arquivo robots.txt
Back to top