kizi.nl
robots.txt

Robots Exclusion Standard data for kizi.nl

Resource Scan

Scan Details

Site Domain kizi.nl
Base Domain kizi.nl
Scan Status Ok
Last Scan2024-09-05T07:24:53+00:00
Next Scan 2024-10-05T07:24:53+00:00

Last Scan

Scanned2024-09-05T07:24:53+00:00
URL https://kizi.nl/robots.txt
Redirect https://www.kizi.nl:443/robots.txt
Redirect Domain www.kizi.nl
Redirect Base kizi.nl
Domain IPs 75.2.46.143, 99.83.223.206
Redirect IPs 75.2.46.143, 99.83.223.206
Response IP 99.83.223.206
Found Yes
Hash b0ee8e4e9275ade03aeaab45d0258430a623c9449a24f9858694149133a093f0
SimHash a890d462ccb3

Groups

slurp

Rule Path
Disallow /

niki-bot

Rule Path
Disallow /

compspybot

Rule Path
Disallow /

trendictionbot

Rule Path
Disallow /

semrushbot

Rule Path
Disallow /

beetlebot

Rule Path
Disallow /

mail.ru_bot

Rule Path
Disallow /

yandex

Rule Path
Disallow /

yandexbot

Rule Path
Disallow /

yandeximages

Rule Path
Disallow /

yandexvideo

Rule Path
Disallow /

yandexmedia

Rule Path
Disallow /

yandexfavicons

Rule Path
Disallow /

*

Rule Path
Allow /autoverzekering/
Allow /autoverzekering/afsluiten/
Allow /autoverzekering/auto-direct-verzekeren/
Allow /autoverzekering/berekenen/
Allow /autoverzekering/car-insurance-netherlands/
Allow /dierenverzekering/
Allow /dierenverzekering/beste/
Allow /dierenverzekering/hondenverzekering/
Allow /dierenverzekering/hondenverzekering/kosten/
Allow /dierenverzekering/kattenverzekering/
Allow /energie/
Allow /energie/gas-en-licht-vergelijken/
Allow /energie/goedkoopste-energieleverancier/
Allow /energie/leveranciers/
Allow /energie/vergelijken/
Allow /geld-lenen/
Allow /geld-lenen/auto-financieren/
Allow /geld-lenen/lening-afsluiten/
Allow /geld-lenen/lening-oversluiten/
Allow /internet/
Allow /internet/alles-in-1/
Allow /internet/glasvezel/
Allow /internet/internet-tv/
Allow /internet/aanbieders/
Allow /mobiel/
Allow /mobiel/providers/
Allow /mobiel/sim-only/
Allow /mobiel/sim-only/aanbiedingen/
Allow /mobiel/sim-only/onbeperkt-bellen/
Allow /mobiel/sim-only/onbeperkt-internet/
Allow /uitvaartverzekering/
Allow /uitvaartverzekering/begrafenisverzekering/
Allow /uitvaartverzekering/goedkoopste/
Allow /uitvaartverzekering/uitvaart-coronavirus/
Allow /uitvaartverzekering/vergelijken/
Allow /woonverzekering/
Allow /woonverzekering/inboedelverzekering/
Allow /woonverzekering/opstalverzekering/
Allow /zorgverzekering/
Allow /zorgverzekering/afsluiten/
Allow /zorgverzekering/beste/
Allow /zorgverzekering/zorgvergelijker/
Allow /zorgverzekering/2021/
Allow /over-kizi/
Allow /algemene-voorwaarden/
Allow /privacy-cookies/
Allow /dienstenwijzer/
Allow /$
Disallow /

Other Records

Field Value
sitemap https://www.kizi.nl/sitemap.xml

Comments

  • Disallow alles. Daarna sectie voor sectie toestaan.
  • Volgorde is belangrijk
  • /$ zorgt er voor dat Google & Bing de homepage gewoon kunnen crawlen.

Warnings

  • 2 invalid lines.