chessteacher.ru
robots.txt

Robots Exclusion Standard data for chessteacher.ru

Resource Scan

Scan Details

Site Domain chessteacher.ru
Base Domain chessteacher.ru
Scan Status Ok
Last Scan2024-05-24T10:01:46+00:00
Next Scan 2024-05-31T10:01:46+00:00

Last Scan

Scanned2024-05-24T10:01:46+00:00
URL https://chessteacher.ru/robots.txt
Domain IPs 23.105.236.220
Response IP 23.105.236.220
Found Yes
Hash e321aa1217e6960f4d78c9aa9f0d9451c3f1ae373dc49bc9b38c4670858c344d
SimHash 4c399a4087a1

Groups

yandex

Rule Path Comment
Disallow /cgi-bin служебная папка для Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= результаты поиска
Disallow /search результаты поиска
Disallow */page/ страницы пагинации
Disallow /*print%3D страницы для печати

googlebot

Rule Path Comment
Disallow /cgi-bin служебная папка для Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= результаты поиска
Disallow /search результаты поиска
Disallow */page/ страницы пагинации
Disallow /*print%3D страницы для печати
Allow *.css открыть все файлы стилей
Allow *.js открыть все с js-скриптами

*

Rule Path Comment
Disallow /cgi-bin служебная папка для Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= результаты поиска
Disallow /search результаты поиска
Disallow */page/ страницы пагинации
Disallow /*print%3D страницы для печати

Other Records

Field Value
crawl-delay 4

Other Records

Field Value
sitemap https://chessteacher.ru/sitemap.xml

Warnings

  • 6 invalid lines.
  • `host` is not a known field.