Log In Sign Up

archief.parool.nl
robots.txt

Robots Exclusion Standard data for archief.parool.nl

Resource Scan

Scan Details

Site Domain archief.parool.nl
Base Domain parool.nl
Scan Status Failed
Failure StageFetching resource.
Failure ReasonRequest timed out.
Last Scan2024-04-04T05:00:07+00:00
Next Scan 2024-07-03T05:00:07+00:00

Last Successful Scan

Scanned2023-09-05T22:24:12+00:00
URL http://archief.parool.nl/robots.txt
Redirect https://www.parool.nl/robots.txt
Redirect Domain www.parool.nl
Redirect Base parool.nl
Domain IPs 146.185.53.23
Redirect IPs 2600:1413:b000:6::17d5:2bc4, 2600:1413:b000:6::17d5:2bd1, 96.17.96.13, 96.17.96.4
Response IP 23.44.4.161
Found Yes
Hash 5d21568a3eb1e77c736c48ae9219432293a6d79494308ee4d8c1f6478a3baa98
SimHash 69500b595f75

Groups

twitterbot

Rule Path
Allow /

*

Rule Path
Allow /
Disallow /*?otag*
Disallow /*?abo_type*
Disallow /*?URL_referrer*
Disallow /auth/
Disallow /temptation/
Disallow /*utm_campaign%3Dshared_earned*
Disallow /*redirectUri%3D*
Disallow /zoeken?query=*
Disallow /search?query=*
Back to top

Other Records

Field Value
sitemap https://www.parool.nl/sitemap.xml
Back to top

Comments

  • Alle auteurs-, naburige en databankrechten die op de inhoud en opmaak van de DPG Media websites
  • en DPG Media apps rusten, worden door DPG Media BV uitdrukkelijk voorbehouden. De inhoud van de
  • DPG Media websites en apps is uitsluitend voor persoonlijk, niet-commercieel gebruik en het is
  • niet toegestaan om gegevens van de website of uit de apps door middel van screen scraping
  • (of een andere geautomatiseerde werkwijze) te vergaren.
  • Zie ook de Gebruikersvoorwaarden van DPG Media B.V. op www.dpgmedia.nl/gebruiksvoorwaarden
  • All copyrights, neighbouring rights and database rights in the content and layout of the
  • DPG Media websites and DPG Media apps are explicitly reserved by DPG Media BV. The content of the DPG Media
  • websites and DPG Media apps is for personal, non-commercial use only and it is not allowed to
  • collect data from the website or from the apps by means of screen scraping (or any other
  • automated method).
  • See also the terms of use of DPG Media B.V. at www.dpgmedia.nl/gebruiksvoorwaarden
Back to top