piter.su
robots.txt

Robots Exclusion Standard data for piter.su

Resource Scan

Scan Details

Site Domain piter.su
Base Domain piter.su
Scan Status Ok
Last Scan2025-11-16T16:05:24+00:00
Next Scan 2025-11-23T16:05:24+00:00

Last Scan

Scanned2025-11-16T16:05:24+00:00
URL https://piter.su/robots.txt
Domain IPs 2a00:f940:2:2:1:1:0:42, 37.140.192.245
Response IP 37.140.192.245
Found Yes
Hash add64c6895c60f461bd716e61f6e07b2dfeb0702820bc1a562f95dbd26ab9957
SimHash c060eb002017

Groups

*

Product Comment
* общие правила для всеÑ
Rule Path Comment
Disallow /wp-admin/ запретить индексацию папки wp-admin (все служебные папки)
Disallow /readme.html закрыть доступ к стандартному файлу о программном обеспечении
Disallow /*? запретить индексацию результатов поиска по сайту
Disallow /?s= запретить все URL поиска по сайту
Allow /wp-admin/admin-ajax.php индексировать асинÑ
Allow /*.css индексировать CSS-файлы
Allow /*.js индексировать JS-скрипты

Other Records

Field Value Comment
sitemap https://site.ru/sitemap.xml указать местоположение карты сайта

Warnings

  • 3 invalid lines.