prostore.pro
robots.txt

Robots Exclusion Standard data for prostore.pro

Resource Scan

Scan Details

Site Domain prostore.pro
Base Domain prostore.pro
Scan Status Ok
Last Scan2024-05-10T16:47:05+00:00
Next Scan 2024-06-09T16:47:05+00:00

Last Scan

Scanned2024-05-10T16:47:05+00:00
URL https://prostore.pro/robots.txt
Domain IPs 87.236.16.93
Response IP 87.236.16.93
Found Yes
Hash 6e04e19bb1081766fa307274bf45e29af20c5d266ca312ab6fb3ab6c41344d90
SimHash 6911984a8a1b

Groups

*

Product Comment
* правила для всеÑ
Rule Path Comment
Disallow /*?utm_source= -
Disallow /*%26utm_medium%3D -
Disallow /*%26utm_campaign%3D -
Disallow /*?sid= -
Disallow /*?gclid= -
Disallow /api/ -
Disallow /docs/ -
Disallow /manager-form-23 -
Disallow /brands/ -
Disallow /manager/ авторизация
Disallow /assets/components/ папка с файлами modx пакетов
Disallow /core/ папка с системными файлами modx
Disallow /connectors/ папка с системными файлами modx
Disallow /index.php дубль главной страницы index.php
Disallow *?* удаляем дубли для всеÑ
Disallow *openstat%3D ссылки с метками openstat
Disallow *from%3D ссылки с метками from
Disallow *utm*%3D ссылки с utm-метками
Disallow *mango*%3D ссылки с mango-метками
Allow /*.jpg здесь и далее открываем для индексации изображения, скрипты и прочие файлы
Allow /*.jpeg -
Allow /*.gif -
Allow /*.png -
Allow /*.pdf -
Allow /*.doc -
Allow /*.docx -
Allow /*.xls -
Allow /*.xlsx -
Allow /*.ppt -
Allow /*.pptx -
Allow /*.css -
Allow /*.js -
Disallow /reg/ -
Disallow /testff/ -
Disallow /login/ -
Disallow /yandex/ -
Disallow /price/ -
Disallow /test -
Disallow /iagree -
Disallow /to-clients/ -
Disallow /docs/* -
Disallow /recover/ -
Disallow /login/ -
Disallow /newdiz -
Disallow /*? -
Disallow /iagree/ -
Disallow /*?%2F -
Disallow /*page%3D* -
Disallow /en/ -
Disallow /*?* -
Disallow /index-test -
Disallow *?page=* -
Disallow /assets/docs/dyson/* -

yandex

Rule Path Comment
Disallow /docs -
Disallow /yandex-specs -
Disallow /recover/ -
Disallow /login/ -
Disallow /brands/ -
Disallow /brands -
Disallow /brands/* -
Disallow /brands/dyson/ -
Disallow /brands/dyson/userguide -
Disallow /brands/dyson/contacts -
Disallow /brands/dyson/registration -
Disallow /brands/dyson/anti-counterfeiting -
Disallow /cgi-bin служебная папка для Ñ
Disallow /? все параметры запроса на главной
Disallow *?s= результаты поиска
Disallow /search результаты поиска
Disallow */page/ страницы пагинации
Disallow /*print%3D страницы для печати

Other Records

Field Value
sitemap https://prostore.pro/sitemap.xml

Warnings

  • 4 invalid lines.
  • `clean-param` is not a known field.
  • `host` is not a known field.