noindex.by
robots.txt

Robots Exclusion Standard data for noindex.by

Resource Scan

Scan Details

Site Domain noindex.by
Base Domain noindex.by
Scan Status Ok
Last Scan2026-01-06T22:25:10+00:00
Next Scan 2026-01-13T22:25:10+00:00

Last Scan

Scanned2026-01-06T22:25:10+00:00
URL https://noindex.by/robots.txt
Domain IPs 104.21.56.45, 172.67.177.96, 2606:4700:3034::ac43:b160, 2606:4700:3036::6815:382d
Response IP 172.67.177.96
Found Yes
Hash 21fe6347fbddd0425819dd1dfd472f12f284432e7e14fbc1084fbf6987f149ac
SimHash 6371d383324d

Groups

*

Rule Path
Disallow /wp-admin
Disallow /wp-includes
Disallow /wp-content/plugins
Disallow /wp-content/cache
Disallow /wp-json/
Disallow /xmlrpc.php
Disallow /readme.html
Disallow /*?
Disallow /?s=
Disallow /?search=
Allow /*.css
Allow /*.js

Comments

  • Директивы для всех поисковых ботов
  • Ограничиваем доступ к внутренним разделам WordPress для защиты от индексации системных файлов
  • Избегаем индексации страниц с параметрами поисковых запросов для улучшения SEO
  • Разрешаем индексацию стилевых и скриптовых файлов, что способствует корректному отображению сайта в поисковиках