musicnur.kz
robots.txt

Robots Exclusion Standard data for musicnur.kz

Resource Scan

Scan Details

Site Domain musicnur.kz
Base Domain musicnur.kz
Scan Status Ok
Last Scan2024-10-22T22:35:13+00:00
Next Scan 2024-11-05T22:35:13+00:00

Last Scan

Scanned2024-10-22T22:35:13+00:00
URL https://musicnur.kz/robots.txt
Domain IPs 104.21.26.57, 172.67.168.57, 2606:4700:3031::6815:1a39, 2606:4700:3037::ac43:a839
Response IP 104.21.26.57
Found Yes
Hash 860a12dae0a512fb9116843a27b4baa05963452823ead968446685a8552710d0
SimHash 2a39978e3249

Groups

*

Rule Path
Disallow /wp-admin
Disallow /wp-includes
Disallow /wp-content/plugins
Disallow /wp-content/cache
Disallow /wp-json/
Disallow /xmlrpc.php
Disallow /readme.html
Disallow /*?
Disallow /?s=
Disallow /?search=
Allow /*.css
Allow /*.js

Comments

  • Ограничение доступа для поисковых роботов к разделам сайта WordPress
  • Запрет индексации плагинов и кэш-файлов WordPress
  • Запрещаем доступ к API и XML-RPC для обеспечения безопасности сайта
  • Скрываем страницу с информацией о сайте для защиты данных
  • Запрет индексации страниц с параметрами и результатов поиска
  • Разрешаем индексацию файлов стилей и JavaScript для улучшения производительности