piemont-cevenol-tourisme.com
robots.txt

Robots Exclusion Standard data for piemont-cevenol-tourisme.com

Resource Scan

Scan Details

Site Domain piemont-cevenol-tourisme.com
Base Domain piemont-cevenol-tourisme.com
Scan Status Ok
Last Scan2025-05-12T16:07:03+00:00
Next Scan 2025-06-11T16:07:03+00:00

Last Scan

Scanned2025-05-12T16:07:03+00:00
URL https://piemont-cevenol-tourisme.com/robots.txt
Redirect https://www.piemont-cevenol-tourisme.com/robots.txt
Redirect Domain www.piemont-cevenol-tourisme.com
Redirect Base piemont-cevenol-tourisme.com
Domain IPs 109.234.162.78
Redirect IPs 109.234.162.78
Response IP 109.234.162.78
Found Yes
Hash 26ce29dff0dff34c189cf00833440f2e3665c13072df24fbf5101986e3fa1f78
SimHash 764356ea62f8

Groups

*

Rule Path
Disallow /wp-login.php

*

Rule Path
Disallow */trackback
Disallow /*/feed
Disallow /*/comments

*

Rule Path
Disallow /cgi-bin
Disallow /*.php$
Disallow /*.inc$
Disallow /*.gz$
Disallow /*.cgi$
Allow /*css?*
Allow /*js?*

Comments

  • On désindexe la page de connexion (contenu inutile)
  • On bloque les URL de ping et de trackback
  • On bloque tous les flux RSS sauf celui principal (enlevez /* pour bloquer TOUS les flux)
  • On bloque toutes les URL de commentaire (flux RSS inclus)
  • On élimine ce répertoire sensible présent sur certains serveurs
  • On désindexe tous les fichiers qui n'ont pas lieu de l'être