2xdgames.ru
robots.txt

Robots Exclusion Standard data for 2xdgames.ru

Resource Scan

Scan Details

Site Domain 2xdgames.ru
Base Domain 2xdgames.ru
Scan Status Failed
Failure StageFetching resource.
Failure ReasonCouldn't connect to server.
Last Scan2024-04-08T14:45:48+00:00
Next Scan 2024-07-07T14:45:48+00:00

Last Successful Scan

Scanned2022-05-31T02:43:39+00:00
URL https://2xdgames.ru/robots.txt
Response IP 5.187.4.121
Found Yes
Hash a3ad46d479983e28f4a70ea310250e71852c9aaa6877fc0f5d30c43c627b8d6b
SimHash 1428c313a435

Groups

*

Product Comment
* общие правила для роботов всеÑ
Rule Path Comment
Disallow /cgi-bin служебная папка для Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск по сайту
Disallow *%26s%3D поиск по сайту
Disallow /search/ поиск по сайту
Disallow /author/ арÑ
Disallow /users/ арÑ
Disallow */trackback трекбеки, уведомления в комментарияÑ
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads
Allow /*/*.js открываем файлы скриптов js
Allow /*/*.css открываем фалы css
Allow /wp-*.png разрешаем индексировать изображения
Allow /wp-*.jpg разрешаем индексировать изображения
Allow /wp-*.jpeg разрешаем индексировать изображения
Allow /wp-*.gif разрешаем индексировать гифки
Allow /wp-admin/admin-ajax.php разрешаем ajax

Other Records

Field Value
sitemap https://2xdgames.ru/sitemap.xml

Comments

  • правило можно удалить)
  • правило можно удалить)
  • Укажите главное зеркало сайта, как в примере ниже (с WWW / без WWW, если HTTPS
  • то пишем протокол, если нужно указать порт, указываем). Команда стала необязательной. Ранее Host понимал
  • Яндекс и Mail.RU. Теперь все основные поисковые системы команду Host не учитывают.
  • Укажите один или несколько файлов Sitemap (дублировать для каждого User-agent не нужно).

Warnings

  • 7 invalid lines.
  • `host` is not a known field.