petworld.ru
robots.txt

Robots Exclusion Standard data for petworld.ru

Resource Scan

Scan Details

Site Domain petworld.ru
Base Domain petworld.ru
Scan Status Ok
Last Scan2024-06-21T14:43:57+00:00
Next Scan 2024-06-28T14:43:57+00:00

Last Scan

Scanned2024-06-21T14:43:57+00:00
URL https://petworld.ru/robots.txt
Domain IPs 194.117.250.39
Response IP 194.117.250.39
Found Yes
Hash 9c567e4828c6aa80f1dbb002506d8063956c95dd4ceb900c38445c1a5a603269
SimHash 04d0a0638d3d

Groups

yandex

Rule Path Comment
Disallow /cgi-bin закрывает каталог скриптов на сервере
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search поиск
Disallow /author/ арÑ
Disallow /xmlrpc.php -
Disallow *?attachment_id= страница вложения. Вообще-то на ней редирект...
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */trackback закрывает уведомления
Disallow */embed все встраивания
Disallow /wp-json/ -
Disallow /transfers.js -
Disallow -
Allow */uploads открываем uploads
Allow /*/*.js внутри /wp- (/*/ - для приоритета)
Allow /*/*.css внутри /wp- (/*/ - для приоритета)
Allow /*/*/*.css -
Allow /*/*/*.js -
Allow /wp-*.png картинки в плагинаÑ
Allow /wp-*.jpg картинки в плагинаÑ
Allow /wp-*.jpeg картинки в плагинаÑ
Allow /wp-*.gif картинки в плагинаÑ
Allow /wp-*.woff -
Allow /HLIC -
Allow /feed/fast/ яндекс-турбо

googlebot

Rule Path Comment
Disallow /cgi-bin закрывает каталог скриптов на сервере
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search поиск
Disallow /author/ арÑ
Disallow /xmlrpc.php -
Disallow *?attachment_id= страница вложения. Вообще-то на ней редирект...
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */trackback закрывает уведомления
Disallow */embed все встраивания
Disallow /wp-json/ -
Disallow /transfers.js -
Allow */uploads открываем uploads
Allow /*/*.js внутри /wp- (/*/ - для приоритета)
Allow /*/*.css внутри /wp- (/*/ - для приоритета)
Allow /*/*/*.css -
Allow /*/*/*.js -
Allow /wp-*.png картинки в плагинаÑ
Allow /wp-*.jpg картинки в плагинаÑ
Allow /wp-*.jpeg картинки в плагинаÑ
Allow /wp-*.gif картинки в плагинаÑ
Allow /wp-*.woff -
Allow /HLIC -
Allow /feed/fast/ яндекс-турбо

*

Rule Path Comment
Disallow /cgi-bin закрывает каталог скриптов на сервере
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search поиск
Disallow /author/ арÑ
Disallow /xmlrpc.php -
Disallow *?attachment_id= страница вложения. Вообще-то на ней редирект...
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */trackback закрывает уведомления
Disallow */embed все встраивания
Disallow /wp-json/ -
Disallow /transfers.js -
Allow */uploads открываем uploads
Allow /*/*.js внутри /wp- (/*/ - для приоритета)
Allow /*/*.css внутри /wp- (/*/ - для приоритета)
Allow /*/*/*.css -
Allow /*/*/*.js -
Allow /wp-*.png картинки в плагинаÑ
Allow /wp-*.jpg картинки в плагинаÑ
Allow /wp-*.jpeg картинки в плагинаÑ
Allow /wp-*.gif картинки в плагинаÑ
Allow /wp-*.woff -
Allow /HLIC -
Allow /feed/fast/ яндекс-турбо

Other Records

Field Value
sitemap https://petworld.ru/sitemap.xml

Warnings

  • 15 invalid lines.
  • `clean-param` is not a known field.
  • `host` is not a known field.