promocroisiere.com
robots.txt

Robots Exclusion Standard data for promocroisiere.com

Resource Scan

Scan Details

Site Domain promocroisiere.com
Base Domain promocroisiere.com
Scan Status Ok
Last Scan2024-06-15T21:05:59+00:00
Next Scan 2024-06-22T21:05:59+00:00

Last Scan

Scanned2024-06-15T21:05:59+00:00
URL https://www.promocroisiere.com/robots.txt
Domain IPs 99.84.238.127, 99.84.238.134, 99.84.238.178, 99.84.238.208
Response IP 18.165.171.8
Found Yes
Hash 2a4ad4565cf116b1d669e7958e6df840439b53c9bffca398e752da24d971b3c9
SimHash fd8019b30dd8

Groups

*

Rule Path
Disallow /static/
Disallow /static/mbab/*
Disallow /fr/info-croisieres/croisiere-*
Disallow /fr/informations/*
Disallow /fr/info-croisieres/compagnies-croisieres$
Disallow /fr/*/async-results/*
Disallow *async*
Disallow /*/?isDaySelected=*
Disallow /*/?moisdepart*
Disallow /?$
Disallow /*/?$
Disallow /fr/croisieres/croisiere-*/navire%2C*/mois%2C*/
Disallow /fr/croisieres/croisiere-*/compagnie%2C*/mois%2C*/
Disallow /fr/croisieres/croisiere-*/destination%2C*/mois%2C*
Allow /fr/croisieres/croisiere-janvier/destination%2C0%2C0/mois%2C1/
Allow /fr/croisieres/croisiere-fevrier/destination%2C0%2C0/mois%2C2/
Allow /fr/croisieres/croisiere-mars/destination%2C0%2C0/mois%2C3/
Allow /fr/croisieres/croisiere-avril/destination%2C0%2C0/mois%2C4/
Allow /fr/croisieres/croisiere-mai/destination%2C0%2C0/mois%2C5/
Allow /fr/croisieres/croisiere-juin/destination%2C0%2C0/mois%2C6/
Allow /fr/croisieres/croisiere-juillet/destination%2C0%2C0/mois%2C7/
Allow /fr/croisieres/croisiere-aout/destination%2C0%2C0/mois%2C8/
Allow /fr/croisieres/croisiere-septembre/destination%2C0%2C0/mois%2C9/
Allow /fr/croisieres/croisiere-octobre/destination%2C0%2C0/mois%2C10/
Allow /fr/croisieres/croisiere-novembre/destination%2C0%2C0/mois%2C11/
Allow /fr/croisieres/croisiere-decembre/destination%2C0%2C0/mois%2C12/
Disallow /*.htmljs$
Disallow */js$
Disallow /*.pack
Disallow /*.packjs
Disallow /fr/sejour-croisiere/--/id*
Disallow /fr/sejour-croisiere/-*
Disallow /fr/sejour-croisiere/devis/*
Disallow /fr/sejour-croisiere/*/null$
Disallow /fr/sejour-croisiere/*/
Disallow /fr/croisieres/croisiere-derniere-minute/*/*
Disallow /fr/croisieres/croisiere-*/navire%2C*/*/
Disallow /fr/croisieres/croisiere-*/destination%2C*/pays%2C*/
Disallow /fr/croisieres/croisiere-*/navire%2C*/pays%2C*/
Disallow /fr/croisieres/croisiere-*/compagnie%2C*/pays%2C*/
Disallow /fr/croisieres/croisiere-*/destination%2C0%2C0/mois%2C*?pageNo=*
Disallow /fr/croisieres/croisiere-*/compagnie%2C*/?duree=*
Disallow /*/s$
Disallow /*//$
Disallow /*/ss$
Disallow /*/t$
Disallow /*/0s$
Disallow -/destination*
Disallow -/navire*
Disallow /%20fr/*
Disallow /fiche-produit/*
Disallow /fr/promocroisierecom/visites-fp?croisiereIds=*
Disallow /fr/*/pays$
Disallow /fr/*/navire$
Disallow /fr/*/destination$
Disallow /fr/*/compagnie$
Disallow /fr/*/wp-login.php
Disallow /croisiere-*--/*
Disallow /fr/croisieres/croisiere-derniere-minute-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-de-luxe-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-bien-etre-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-en-famille-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-en-groupe-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-fluviale-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-pas-cher-*/*/mois%2C*
Disallow /fr/croisieres/croisiere-voyage-de-noces-*/*/mois%2C*
Disallow /croisieres-mediterranee-en-*/*?pageNo=*
Disallow /fr/demande-cotation-info/*
Disallow /offre-speciale*/
Disallow /fr/offre-speciale/*/*$
Disallow /fr/devis/confirm/*
Disallow /fr/$

Other Records

Field Value
sitemap https://www.promocroisiere.com/sitemap.xml

Comments

  • .______ .______ ______ .___ ___. ______ ______ .______ ______ __ _______. __ _______ .______ _______
  • | _ \ | _ \ / __ \ | \/ | / __ \ / || _ \ / __ \ | | / || | | ____|| _ \ | ____|
  • | |_) | | |_) | | | | | | \ / | | | | | | ,----'| |_) | | | | | | | | (----`| | | |__ | |_) | | |__
  • | ___/ | / | | | | | |\/| | | | | | | | | / | | | | | | \ \ | | | __| | / | __|
  • | | | |\ \----.| `--' | | | | | | `--' | | `----.| |\ \----.| `--' | | | .----) | | | | |____ | |\ \----.| |____
  • | _| | _| `._____| \______/ |__| |__| \______/ \______|| _| `._____| \______/ |__| |_______/ |__| |_______|| _| `._____||_______|
  • Promocroisiere pour crawl - v2.20240523
  • Block media files and static resources
  • Block specific cruise info pages
  • Block asynchronous result pages
  • Block URL parameters
  • Block specific cruise categories and patterns
  • Allow specific cruise destination pages by month
  • Block specific file types
  • Block specific pages and patterns for cruise stays
  • Block last-minute cruise pages
  • Block specific cruise types and destinations
  • Block pages with specific URL patterns and parameters
  • Block specific company and ship pages
  • Block specific offer and quotation pages
  • 03102023