rws.nl
robots.txt

Robots Exclusion Standard data for rws.nl

Resource Scan

Scan Details

Site Domain rws.nl
Base Domain rws.nl
Scan Status Ok
Last Scan2024-09-09T01:11:37+00:00
Next Scan 2024-09-23T01:11:37+00:00

Last Scan

Scanned2024-09-09T01:11:37+00:00
URL https://rws.nl/robots.txt
Redirect https://www.rijkswaterstaat.nl/robots.txt
Redirect Domain www.rijkswaterstaat.nl
Redirect Base rijkswaterstaat.nl
Domain IPs 20.31.37.66
Redirect IPs 20.31.37.66
Response IP 20.31.37.66
Found Yes
Hash 960404249e9c8614d64b06e9d502685a3728eafbec6278167b56f0d9d02b47a0
SimHash 74495c108dd3

Groups

*

Rule Path
Disallow /*.aspx
Disallow /zoeken*

Other Records

Field Value
sitemap https://www.rijkswaterstaat.nl/sitemap.xml
sitemap https://www.rijkswaterstaat.nl/nieuws/sitemap.xml