Log In Sign Up

suburbia.com.mx
robots.txt

Robots Exclusion Standard data for suburbia.com.mx

Resource Scan

Scan Details

Site Domain suburbia.com.mx
Base Domain suburbia.com.mx
Scan Status Ok
Last Scan2024-11-04T12:11:46+00:00
Next Scan 2024-11-18T12:11:46+00:00

Last Scan

Scanned2024-11-04T12:11:46+00:00
URL https://suburbia.com.mx/robots.txt
Redirect https://www.suburbia.com.mx/robots.txt
Redirect Domain www.suburbia.com.mx
Redirect Base suburbia.com.mx
Domain IPs 201.116.168.228
Redirect IPs 23.215.7.25, 23.215.7.29
Response IP 23.209.46.150
Found Yes
Hash 755a28aa9e844175ce0a0bea0594df6d670b1b8dff570dc331f550e6fc5f292f
SimHash 4094ae88c372

Groups

*

Rule Path
Allow /

googlebot

Rule Path
Disallow

googlebot-image

Rule Path
Disallow

googlebot-video

Rule Path
Disallow

googlebot-mobile

Rule Path
Disallow

googlebot/2.1

Rule Path
Disallow

storebot-google

Rule Path
Disallow

adsbot-google

Rule Path
Disallow

mediapartners-google

Rule Path
Disallow

googlebot-shopping

Rule Path
Disallow
Disallow /tienda/cart$
Disallow /tienda/users/creditCards$
Disallow /tienda/paginas/mis-seguros$
Disallow /tienda/page-2$
Disallow /tienda/credit$
Disallow /tienda/help$
Disallow /tienda/airtime$
Disallow /tienda/nip$
Disallow /tienda/monitor-orders$
Disallow /tienda/safety-site$
Disallow /tienda/services$
Disallow /tienda/stores$
Disallow /promotions$
Disallow /tienda/sitemap$
Disallow /tienda/events?eventNo=1$
Disallow /pif$
Disallow /tienda/*compareBy
Disallow /tienda/*eventDNo
Disallow /tienda/*eventNo
Disallow /tienda/*undefined
Disallow /tienda/*.php$
Disallow /tienda/*.jsp$
Disallow /tienda/cart$
Disallow /tienda/m
Disallow /tienda/*page-
Disallow /tienda/*search

etaospider

Rule Path
Disallow /
Back to top

Other Records

Field Value
sitemap https://www.suburbia.com.mx/sitemap/sitemap.xml
Back to top

Comments

  • Actualizacion: 9 de septiembre de 2024
  • Suburbia.com.mx
  • Permitir a todos los robots rastrear todo el sitio
  • Permitir a los robots de Google rastrear todas las paginas
  • Permitir a los robots de Google Images rastrear todas las imagenes
  • Permitir a los robots de Google Video rastrear todas las paginas de video
  • Permitir a los robots de Google Mobile rastrear todas las paginas moviles
  • Permitir a los robots de Google rastrear todas las paginas
  • Permitir a los bots de Google rastrear todas las paginas
  • Permitir a los bots de Google Ads rastrear todas las paginas
  • Permitir a los bots de Google AdSense rastrear todas las paginas
  • Googlebot-Shopping para permitir rastreo especializado en productos
  • Bloquear acceso a paginas especificas (Landings)
  • Bloquear acceso a grupos especificos de paginas
  • Bloquear Spiders - Comparador de precios
  • Permitir a los rastreadores de busqueda descubrir el sitemap
Back to top