str-control.ru
robots.txt

Robots Exclusion Standard data for str-control.ru

Resource Scan

Scan Details

Site Domain str-control.ru
Base Domain str-control.ru
Scan Status Failed
Failure ReasonScan timed out.
Last Scan2024-09-19T18:11:57+00:00
Next Scan 2024-10-03T18:11:57+00:00

Last Successful Scan

Scanned2024-09-04T03:52:21+00:00
URL https://str-control.ru/robots.txt
Domain IPs 46.148.230.80
Response IP 46.148.230.80
Found Yes
Hash 9f015352ef43f332899e1ee9f2e1cc4b9b0f32ec5a14c05e2fca82abde7726d7
SimHash 107011c28e40

Groups

*

Rule Path Comment
Disallow /cgi-bin папка на хостинге
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search/ поиск
Disallow /author/ архив автора
Disallow /users/ архив авторов
Disallow */trackback трекбеки, уведомления в комментариях о появлении открытой
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /readme.html -
Disallow /work.html -
Disallow /pravoobladateljam/ -
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads

Other Records

Field Value
sitemap https://str-control.ru/sitemap.xml

Comments

  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)

Warnings

  • `host` is not a known field.