Log In Sign Up

spystore.cl
robots.txt

Robots Exclusion Standard data for spystore.cl

Resource Scan

Scan Details

Site Domain spystore.cl
Base Domain spystore.cl
Scan Status Ok
Last Scan2025-12-03T04:02:07+00:00
Next Scan 2026-01-02T04:02:07+00:00

Last Scan

Scanned2025-12-03T04:02:07+00:00
URL https://spystore.cl/robots.txt
Redirect https://www.spystore.cl/robots.txt
Redirect Domain www.spystore.cl
Redirect Base spystore.cl
Domain IPs 13.219.49.56, 44.220.101.65
Redirect IPs 13.219.49.56, 44.220.101.65
Response IP 13.219.49.56
Found Yes
Hash c9a05a18a71d6395d54d9c82a0c274330ebc0d2d6ef6075e73573c9a6dba564a
SimHash 62daeb32cac0

Groups

*

Rule Path
Disallow /*
Allow /$
Allow /product/*
Allow /brand/*
Allow /collection/*
Allow /article/*
Allow /form/*
Allow /sheet/*
Allow /sitemap.xml
Allow /robots.txt

Other Records

Field Value
crawl-delay 60

gptbot
chatgpt-user
ccbot
claudebot
google-extended
perplexitybot
applebot-extended

No rules defined. All paths allowed.

Back to top

Other Records

Field Value
sitemap https://www.spystore.cl/sitemap.xml
Back to top

Comments

  • @Bsale 2025
  • Todos los agentes
  • Tiempo de acceso cada 60 seg //no lo considera google bot
  • Bloquea todo, para evitar directorios anteriores
  • permite index
  • Permitidos SOLO desde estos directorios elementos hijos
  • ej en url /product/nombre bloquea /product y permite /product/nombre
  • las busquedas no se muestran ya que son particulares por usuario y no deben quedar vinculadas a google
  • Bots de Inteligencia Artificial
  • Direccion del sitemap (el sitemap de genera automatico, no se puede editar)
Back to top