turplay.ru
robots.txt

Robots Exclusion Standard data for turplay.ru

Resource Scan

Scan Details

Site Domain turplay.ru
Base Domain turplay.ru
Scan Status Ok
Last Scan2024-10-26T14:57:12+00:00
Next Scan 2024-11-02T14:57:12+00:00

Last Scan

Scanned2024-10-26T14:57:12+00:00
URL https://turplay.ru/robots.txt
Domain IPs 2a00:15f8:a000:5:1:11:0:68c0, 2a00:15f8:a000:5:1:12:0:68c0, 2a00:15f8:a000:5:1:13:0:68c0, 2a00:15f8:a000:5:1:14:0:68c0, 90.156.201.101, 90.156.201.104, 90.156.201.105, 90.156.201.106
Response IP 90.156.201.105
Found Yes
Hash 8e0174bbf9d6f298a4906f524b5ae389968022c283c8cdb16217b3d1b43b6fe8
SimHash 507c1a228a50

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Disallow /cgi-bin папка на хостинге
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search/ поиск
Disallow /author/ архив автора
Disallow /account/ архив автора 2
Disallow /users/ архив авторов
Disallow */trackback трекбеки, уведомления в комментариях о появлении открытой
Disallow */feed все фиды
Disallow */tag все теги
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads

ahrefssiteaudit

Rule Path
Allow /

ahrefsbot

Rule Path
Allow /

googlebot

Product Comment
googlebot правила для Google (комментарии не дублирую)
Rule Path Comment
Disallow /cgi-bin -
Disallow /? -
Disallow /wp- -
Disallow /wp/ -
Disallow *?s= -
Disallow *%26s%3D -
Disallow /search/ -
Disallow /author/ -
Disallow /account/ -
Disallow /users/ -
Disallow */trackback -
Disallow */feed -
Disallow */tag -
Disallow */rss -
Disallow */embed -
Disallow */updatecorex/ -
Disallow */wlwmanifest.xml -
Disallow /xmlrpc.php -
Disallow *utm%3D -
Disallow *openstat%3D -
Disallow /wpvotrz/ -
Disallow /vlknit/ -
Allow */uploads -
Allow /*/*.js открываем js-скрипты внутри /wp- (/*/ - для приоритета)
Allow /*/*.css открываем css-файлы внутри /wp- (/*/ - для приоритета)
Allow /wp-*.png картинки в плагинах, cache папке и т.д.
Allow /wp-*.jpg картинки в плагинах, cache папке и т.д.
Allow /wp-*.jpeg картинки в плагинах, cache папке и т.д.
Allow /wp-*.gif картинки в плагинах, cache папке и т.д.
Allow /wp-admin/admin-ajax.php используется плагинами, чтобы не блокировать JS и CSS

yandex

Product Comment
yandex правила для Яндекса (комментарии не дублирую)
Rule Path
Disallow /cgi-bin
Disallow */updatecorex/
Disallow /?
Disallow /wp-
Disallow /wp/
Disallow */wp-content/
Disallow */amp/
Disallow *?s=
Disallow *%26s%3D
Disallow /search/
Disallow /author/
Disallow /account/
Disallow /users/
Disallow */trackback
Disallow */feed
Disallow */tag
Disallow */rss
Disallow */embed
Disallow */wlwmanifest.xml
Disallow /xmlrpc.php
Disallow /wpvotrz/
Disallow /vlknit/
Allow /rss.xml
Allow /rss2.xml
Allow /rss3.xml
Allow /rss4.xml
Allow /rss5.xml
Allow */uploads
Allow /*/*.js
Allow /*/*.css
Allow /wp-*.png
Allow /wp-*.jpg
Allow /wp-*.jpeg
Allow /wp-*.gif
Allow /wp-admin/admin-ajax.php

ahrefssiteaudit

Rule Path
Allow /

Other Records

Field Value
sitemap https://turplay.ru/sitemap_index.xml

Comments

  • т.к. для них правила ниже
  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)
  • от индексирования, а удалять параметры меток,
  • Google такие правила не поддерживает

Warnings

  • `clean-param` is not a known field.
  • `host` is not a known field.