Log In Sign Up

r-meister.ru
robots.txt

Robots Exclusion Standard data for r-meister.ru

Resource Scan

Scan Details

Site Domain r-meister.ru
Base Domain r-meister.ru
Scan Status Ok
Last Scan2024-10-22T11:50:06+00:00
Next Scan 2024-11-21T11:50:06+00:00

Last Scan

Scanned2024-10-22T11:50:06+00:00
URL https://r-meister.ru/robots.txt
Domain IPs 45.130.41.31
Response IP 45.130.41.31
Found Yes
Hash 834936f3eed50926178ddb8317a69a84c69155fdcbd560d3e181169a2dd39d33
SimHash 54159951e883

Groups

*

Rule Path
Disallow /cart/
Disallow /sluzhebnoe/
Disallow /account/
Disallow /search/
Disallow /*?sort=
Disallow /?page=1
Disallow /?page=2
Disallow /?page=3
Disallow /*etext*
Disallow /*?yclid
Disallow /assets/components/
Disallow /*.xlsx
Disallow /*.doc
Allow /*sluzhebnoe/ya-yml.xml
Allow /sluzhebnoe/karta-sajta/
Back to top

Other Records

Field Value
sitemap https://r-meister.ru/sitemap.xml
Back to top

Comments

  • Disallow: /wheels/
  • Disallow: /opora/
  • Disallow: /opora-group-series/
  • закрываем документы, пусть целевые страницы индексируются
  • разрешаем индексировать документы pdf во избежание ошибок индексирования гугл
  • Disallow: /*.pdf
  • индексирование страниц с page
  • Allow: /*page
  • закрываем индекс для page
Back to top

Warnings

  • `clean-param` is not a known field.
Back to top