triruki.ru
robots.txt

Robots Exclusion Standard data for triruki.ru

Resource Scan

Scan Details

Site Domain triruki.ru
Base Domain triruki.ru
Scan Status Ok
Last Scan2024-11-15T11:22:34+00:00
Next Scan 2024-11-22T11:22:34+00:00

Last Scan

Scanned2024-11-15T11:22:34+00:00
URL https://triruki.ru/robots.txt
Domain IPs 185.250.47.111
Response IP 185.250.47.111
Found Yes
Hash 4dfef16cb762528741332c1ed8794c811a6386d1da7a95fed9a0c4703fca7187
SimHash 107c43a24644

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Disallow /cgi-bin папка на хостинге
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow */trackback трекбеки, уведомления в комментариях о появлении открытой
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads

Other Records

Field Value
crawl-delay 10

exabot

Rule Path
Disallow /

idbot

Rule Path
Disallow /

bingbot

Rule Path
Disallow /

wotbox

Rule Path
Disallow /

baiduspider

Rule Path
Disallow /

baiduspider-image

Rule Path
Disallow /

baiduspider-video

Rule Path
Disallow /

baiduspider-news

Rule Path
Disallow /

baiduspider-favo

Rule Path
Disallow /

baiduspider-cpro

Rule Path
Disallow /

baiduspider-ads

Rule Path
Disallow /

baidu

Rule Path
Disallow /

mj12bot

Rule Path
Disallow /

ahrefsbot

Rule Path
Disallow /

dotbot

Rule Path
Disallow /

riddler

Rule Path
Disallow /

semrushbot

Rule Path
Disallow /

linkpadbot

Rule Path
Disallow /

blexbot

Rule Path
Disallow /

flipboardproxy

Rule Path
Disallow /

aihitbot

Rule Path
Disallow /

trovitbot

Rule Path
Disallow /

*

Rule Path
Disallow /wp-content/uploads/wp-import-export-lite/

Comments

  • т.к. для них правила ниже
  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)
  • WP Import Export Rule

Warnings

  • `host` is not a known field.