verzekering.nl
robots.txt
Robots Exclusion Standard data for verzekering.nl
Resource Scan
Scan Details
| Site Domain | verzekering.nl |
| Base Domain | verzekering.nl |
| Scan Status | Ok |
| Last Scan | 2024-10-02T13:08:12+00:00 |
| Next Scan | 2024-11-01T13:08:12+00:00 |
Last Scan
| Scanned | 2024-10-02T13:08:12+00:00 |
| URL | https://verzekering.nl/robots.txt |
| Domain IPs | 162.159.135.42 |
| Response IP | 162.159.135.42 |
| Found | Yes |
| Hash | fb9a620c197e1e9416696b694b8a9ab469f79d4cfda657c09da21e1a9604f3d1 |
| SimHash | bcae4c9289f3 |
Groups
*
| Rule | Path |
|---|---|
| Disallow | /wp-admin/ |
| Disallow | *?s=* |
| Disallow | */tags/* |
| Disallow | /zorgverzekering/vergelijken/ |
| Disallow | /autoverzekering/vergelijken/ |
| Disallow | /inboedelverzekering/vergelijken/ |
| Disallow | /aansprakelijkheidsverzekering/vergelijken/ |
| Disallow | /fietsverzekering/vergelijken/ |
| Disallow | /dierenverzekering/vergelijken/ |
| Disallow | /reisverzekering/vergelijken/ |
| Disallow | /scooter-en-brommerverzekeringen/vergelijken/ |
| Disallow | /inboedelverzekering/vergelijken/ |
| Disallow | /motorverzekering/vergelijken/ |
| Disallow | /rechtsbijstandverzekering/vergelijken/ |
| Disallow | /caravanverzekering/vergelijken/ |
| Disallow | *?blog=* |
| Disallow | *feed%26* |
Other Records
| Field | Value |
|---|---|
| sitemap | https://www.verzekering.nl/sitemap.xml |