darkwink.com
robots.txt

Robots Exclusion Standard data for darkwink.com

Resource Scan

Scan Details

Site Domain darkwink.com
Base Domain darkwink.com
Scan Status Ok
Last Scan2024-11-18T18:00:27+00:00
Next Scan 2024-11-25T18:00:27+00:00

Last Scan

Scanned2024-11-18T18:00:27+00:00
URL http://darkwink.com/robots.txt
Redirect http://www.darkwink.com/robots.txt
Redirect Domain www.darkwink.com
Redirect Base darkwink.com
Domain IPs 216.239.32.21, 216.239.34.21, 216.239.36.21, 216.239.38.21
Redirect IPs 216.239.32.21, 216.239.34.21, 216.239.36.21, 216.239.38.21
Response IP 216.239.34.21
Found Yes
Hash a9ba9eed3dab34263866e54b55b7f9f987c1a430df2cbd1ed1990413b29248a9
SimHash 85524a40a834

Groups

mediapartners-google

Product Comment
mediapartners-google Sólo para el robot de Adsense
Rule Path Comment
Disallow Al robot de Adsense le dejamos rastrear todas las páginas

*

Product Comment
* Todos los rastreadores se dan por aludidos.
Rule Path Comment
Disallow /*archive/ Bloquea los directorios que acaben por archive

Other Records

Field Value
sitemap http://drwtech.blogspot.com/sitemap-pages.xml
sitemap http://drwtech.blogspot.com/sitemap.xml

Comments

  • Archivo robots.txt personalizado | Exprimiblog.
  • Disallow: /*? # Bloquea URLs que incluyan signo de interrogación (anulado)
  • Incluimos la dirección del sitemap xml para entradas y páginas