Log In Sign Up

autotrack.nl
robots.txt

Robots Exclusion Standard data for autotrack.nl

Resource Scan

Scan Details

Site Domain autotrack.nl
Base Domain autotrack.nl
Scan Status Failed
Failure StageFetching resource.
Failure ReasonServer returned a client error.
Last Scan2024-06-18T14:45:25+00:00
Next Scan 2024-07-02T14:45:25+00:00

Last Successful Scan

Scanned2024-02-26T12:10:11+00:00
URL https://autotrack.nl/robots.txt
Redirect https://www.autotrack.nl/robots.txt
Redirect Domain www.autotrack.nl
Redirect Base autotrack.nl
Domain IPs 2600:1413:b000:6::17d5:2bca, 2600:1413:b000:6::17d5:2bdf, 96.17.96.11, 96.17.96.5
Redirect IPs 2600:1413:b000:6::17d5:2bca, 2600:1413:b000:6::17d5:2bdf, 96.17.96.11, 96.17.96.5
Response IP 23.48.107.74
Found Yes
Hash ff948c609d0309508497970957202746152ea8279143eda9b900f7cf37aadec4
SimHash 69110b53cf75

Groups

gptbot

Rule Path
Disallow /

chatgpt-user

Rule Path
Disallow /

ccbot

Rule Path
Disallow /

anthropic-ai

Rule Path
Disallow /

*

Rule Path
Disallow /cdn-cgi/
Disallow /*?
Allow /*?adNotFound
Allow /occasions/toyota?paginanummer=*
Disallow /be/*
Disallow /blog/merk/*
Disallow /tweedehands/*/*/*/financiering
Disallow /tweedehands/*/*/*/inruilvoorstel
Disallow /tweedehands/*/*/*/verzekeren
Disallow /tweedehands/*/*/*/aanbieder
Disallow /tweedehands/*/*/*/garanties-en-zekerheden
Disallow /tweedehands/*/*/*/extra-gegevens
Disallow /tweedehands/*/carfax
Disallow /tweedehands/*/delen
Disallow /tweedehands/melden
Disallow *session_trace*
Disallow *jserrors*
Disallow /autobedrijf/*/website$
Disallow /tweedehands/*/website$
Disallow /login/
Disallow /mijn-autotrack
Disallow /auteursrechten
Back to top

Other Records

Field Value
sitemap https://www.autotrack.nl/sitemap_autobedrijf.xml
sitemap https://www.autotrack.nl/sitemap_brand_model.xml
sitemap https://www.autotrack.nl/sitemap_brand_model_auto.xml
sitemap https://www.autotrack.nl/sitemap_typen.xml
sitemap https://www.autotrack.nl/sitemap_blog.xml
sitemap https://www.autotrack.nl/sitemap_regio.xml
Back to top

Comments

  • Alle auteurs-, naburige en databankrechten die op de inhoud en opmaak van de DPG Media websites en DPG Media apps rusten, worden door DPG Media BV uitdrukkelijk voorbehouden.
  • De inhoud van de DPG Media websites en apps is uitsluitend voor persoonlijk, niet-commercieel gebruik en het is niet toegestaan om gegevens zoals tekst, afbeeldingen, audio, video of code van de websites of de apps door middel van scraping(of een andere geautomatiseerde werkwijze) te vergaren.
  • Zie ook de Gebruikersvoorwaarden van DPG Media B.V. op www.dpgmedia.nl/gebruiksvoorwaarden.
  • All copyrights, neighbouring rights and database rights in the content and layout of the DPG Media websites and DPG Media apps are explicitly reserved by DPG Media BV.
  • The content of the DPG Media websites and DPG Media apps is for personal, non-commercial use only and it is not allowed to collect data such as text, images, audio, video or code from the websites or from the apps by means of scraping (or any other automated method).
  • See also the terms of use of DPG Media B.V. at www.dpgmedia.nl/gebruiksvoorwaarden.
Back to top