bootstrap5.ru
robots.txt

Robots Exclusion Standard data for bootstrap5.ru

Resource Scan

Scan Details

Site Domain bootstrap5.ru
Base Domain bootstrap5.ru
Scan Status Ok
Last Scan2025-09-24T08:12:50+00:00
Next Scan 2025-10-01T08:12:50+00:00

Last Scan

Scanned2025-09-24T08:12:50+00:00
URL https://bootstrap5.ru/robots.txt
Domain IPs 45.130.41.51
Response IP 45.130.41.51
Found Yes
Hash a135eb5050594b9293d5758dc9e763235324d4ba484f40d6531880dff1f2d839
SimHash 39bc8c50f2bc

Groups

*

Product Comment
* правила для всеÑ
Rule Path Comment
Disallow /assets/ -
Disallow /docss/ -
Disallow /saf7MRl* -
Disallow /index.php дубли страниц index.php
Disallow *?* ссылки с параметрами
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Disallow *from%3D ссылки с метками from
Allow /assets/*.jpg здесь и далее открываем для индексации изображения, файлы и скрипты
Allow /assets/*.jpeg -
Allow /assets/*.gif -
Allow /assets/*.png -
Allow /assets/*.pdf -
Allow /assets/*.doc -
Allow /assets/*.docx -
Allow /assets/*.xls -
Allow /assets/*.xlsx -
Allow /assets/*.ppt -
Allow /assets/*.pptx -
Allow /assets/*.js -
Allow /assets/*.css -
Allow *?page= открываем для индексации страницы пагинации (и проверьте, чтобы для ниÑ

Other Records

Field Value
sitemap https://bootstrap5.ru/sitemap.xml

Comments

  • Укажите один или несколько файлов Sitemap

Warnings

  • 2 invalid lines.