Log In Sign Up

ferien-netzwerk.de
robots.txt

Robots Exclusion Standard data for ferien-netzwerk.de

Resource Scan

Scan Details

Site Domain ferien-netzwerk.de
Base Domain ferien-netzwerk.de
Scan Status Ok
Last Scan2025-10-31T09:13:27+00:00
Next Scan 2025-11-07T09:13:27+00:00

Last Scan

Scanned2025-10-31T09:13:27+00:00
URL https://ferien-netzwerk.de/robots.txt
Redirect https://www.ferien-netzwerk.de/robots.txt
Redirect Domain www.ferien-netzwerk.de
Redirect Base ferien-netzwerk.de
Domain IPs 23.88.6.183, 2a01:4f8:272:3dc7::2
Redirect IPs 23.88.6.183, 2a01:4f8:272:3dc7::2
Response IP 23.88.6.183
Found Yes
Hash 3828b3f682befe34f37fd2770ece775ca435ee82deeacdfb781c3953e11c94e4
SimHash 6b1f1ca08931

Groups

*

Rule Path
Disallow /tests/
Disallow /demo/
Disallow /service/belegungskalender/tools/
Disallow /output-extern/
Disallow /addons/tracker/
Disallow /unterkunft/*/homepage/
Disallow /unterkunft/*/hausprospekt/
Disallow /addons/leaflet-osm/ajaxdata/

barkrowler

Rule Path
Disallow /

seokicks

Rule Path
Disallow /

dataforseobot

Rule Path
Disallow /

gaisbot

Rule Path
Disallow /

irlbot

Rule Path
Disallow /

dotbot

Rule Path
Disallow /

botonparade

Rule Path
Disallow /

spbot

Rule Path
Disallow /

integromedb

Rule Path
Disallow /

openindexspider

Rule Path
Disallow /

proximic

Rule Path
Disallow /

mj12bot

Rule Path
Disallow /

blexbot

Rule Path
Disallow /

seekportbot

Rule Path
Disallow /
Back to top

Other Records

Field Value
sitemap https://www.ferien-netzwerk.de/sitemap/ferien-netzwerk-sitemap_index.xml
Back to top

Comments

  • Ruft nur Formulare für Anfragen und Bewertungen ab
  • https://www.babbar.tech/crawler
  • Nervt mit fehlerhaften zusammengebauten URLs
  • Die Suma https://www.seekport.com/ finktioniert nicht. Gehört Sistrix
Back to top