Log In Sign Up

boekrecensies.trouw.nl
robots.txt

Robots Exclusion Standard data for boekrecensies.trouw.nl

Resource Scan

Scan Details

Site Domain boekrecensies.trouw.nl
Base Domain trouw.nl
Scan Status Failed
Failure StageFetching resource.
Failure ReasonRequest timed out.
Last Scan2024-04-08T07:02:58+00:00
Next Scan 2024-07-07T07:02:58+00:00

Last Successful Scan

Scanned2023-09-08T17:50:34+00:00
URL http://boekrecensies.trouw.nl/robots.txt
Redirect https://www.trouw.nl/robots.txt
Redirect Domain www.trouw.nl
Redirect Base trouw.nl
Domain IPs 146.185.53.23
Redirect IPs 23.48.107.43, 23.48.107.67, 2600:1413:b000:6::17d5:2bc4, 2600:1413:b000:6::17d5:2bd1
Response IP 125.56.219.18
Found Yes
Hash 108d960a831697f66f67f94b483214549ae694d137ab6b66bc2e308858895c8c
SimHash 69500b595f75

Groups

twitterbot

Rule Path
Allow /

*

Rule Path
Allow /
Disallow /*?otag*
Disallow /*?abo_type*
Disallow /*?URL_referrer*
Disallow /auth/
Disallow /temptation/
Disallow /*utm_campaign%3Dshared_earned*
Disallow /*redirectUri%3D*
Disallow /zoeken?query=*
Disallow /search?query=*
Back to top

Other Records

Field Value
sitemap https://www.trouw.nl/sitemap.xml
Back to top

Comments

  • Alle auteurs-, naburige en databankrechten die op de inhoud en opmaak van de DPG Media websites
  • en DPG Media apps rusten, worden door DPG Media BV uitdrukkelijk voorbehouden. De inhoud van de
  • DPG Media websites en apps is uitsluitend voor persoonlijk, niet-commercieel gebruik en het is
  • niet toegestaan om gegevens van de website of uit de apps door middel van screen scraping
  • (of een andere geautomatiseerde werkwijze) te vergaren.
  • Zie ook de Gebruikersvoorwaarden van DPG Media B.V. op www.dpgmedia.nl/gebruiksvoorwaarden
  • All copyrights, neighbouring rights and database rights in the content and layout of the
  • DPG Media websites and DPG Media apps are explicitly reserved by DPG Media BV. The content of the DPG Media
  • websites and DPG Media apps is for personal, non-commercial use only and it is not allowed to
  • collect data from the website or from the apps by means of screen scraping (or any other
  • automated method).
  • See also the terms of use of DPG Media B.V. at www.dpgmedia.nl/gebruiksvoorwaarden
Back to top