Log In Sign Up

mannbackt.de
robots.txt

Robots Exclusion Standard data for mannbackt.de

Resource Scan

Scan Details

Site Domain mannbackt.de
Base Domain mannbackt.de
Scan Status Ok
Last Scan2024-06-22T14:44:34+00:00
Next Scan 2024-06-29T14:44:34+00:00

Last Scan

Scanned2024-06-22T14:44:34+00:00
URL https://mannbackt.de/robots.txt
Domain IPs 104.21.53.227, 172.67.219.121
Response IP 172.67.219.121
Found Yes
Hash 49cf191ab4da85c5278cf3ab59f52079cf961359e713a5dc3da3a62c13e32f7c
SimHash 3948909aa323

Groups

*

Rule Path
Disallow /wp-admin/

webreaper
webcopier
offline explorer
httrack
microsoft.url.control
emailcollector
penthesilea
mj12bot
bbot
yandex
yandex
baiduspider
baiduspider
baiduspider
exabot
ahrefsbot
dotbot
nutch
java
cfnetwork
web core / roots

Rule Path
Disallow /
Back to top

Comments

  • ===================================
  • Erstellt am: 19.10.2015, 17:22 Uhr
  • Webseite: mannbackt.de
  • ===================================
  • ===================================
  • Folgende Seiten sollen nicht indexiert werden:
  • ===================================
  • ===================================
  • Schließe folgende Spider komplett aus:
  • ===================================
Back to top