globaldesign.by
robots.txt

Robots Exclusion Standard data for globaldesign.by

Resource Scan

Scan Details

Site Domain globaldesign.by
Base Domain globaldesign.by
Scan Status Failed
Failure StageFetching resource.
Failure ReasonCouldn't connect to server.
Last Scan2025-10-29T09:25:31+00:00
Next Scan 2026-01-27T09:25:31+00:00

Last Successful Scan

Scanned2023-06-19T00:32:27+00:00
URL https://globaldesign.by/robots.txt
Domain IPs 2a0a:7d80:1:7::91:ce, 93.125.99.73
Response IP 93.125.99.73
Found Yes
Hash ce8baccf80f7a90183e5e2004524c3ed4da4a7f172c820e86fa0f11923e04e4e
SimHash 2cb89c40f298

Groups

*

Product Comment
* правила для всеÑ
Rule Path Comment
Disallow /cgi-bin папка на Ñ
Disallow /manager/ авторизация
Disallow /assets/ папка с системными файлами modx
Disallow /core/ папка с системными файлами modx
Disallow /connectors/ папка с системными файлами modx
Disallow /index.php дубли страниц index.php
Disallow *?* ссылки с параметрами
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Disallow *from%3D ссылки с метками from
Disallow /index.php -
Disallow /index.html -
Disallow /main.php -
Disallow /home -
Disallow /?page=1* -
Disallow /izbrannyie-tovaryi -
Disallow /?yclid -
Disallow /?gclid -
Disallow */wp-content/ -
Allow /assets/*.jpg здесь и далее открываем для индексации изображения, файлы и скрипты
Allow /assets/*.jpeg -
Allow /assets/*.gif -
Allow /assets/*.png -
Allow /assets/*.pdf -
Allow /assets/*.doc -
Allow /assets/*.docx -
Allow /assets/*.xls -
Allow /assets/*.xlsx -
Allow /assets/*.ppt -
Allow /assets/*.pptx -
Allow /assets/*.js -
Allow /assets/*.css -
Allow *?page= открываем для индексации страницы пагинации (и проверьте, чтобы для ниÑ

Other Records

Field Value
sitemap https://globaldesign.by/sitemap.xml

Comments

  • Укажите один или несколько файлов Sitemap

Warnings

  • 3 invalid lines.
  • `host` is not a known field.