boguchar-pamyat.ru
robots.txt

Robots Exclusion Standard data for boguchar-pamyat.ru

Resource Scan

Scan Details

Site Domain boguchar-pamyat.ru
Base Domain boguchar-pamyat.ru
Scan Status Ok
Last Scan2025-03-27T21:03:55+00:00
Next Scan 2025-04-03T21:03:55+00:00

Last Scan

Scanned2025-03-27T21:03:55+00:00
URL https://boguchar-pamyat.ru/robots.txt
Domain IPs 141.8.195.124
Response IP 141.8.195.124
Found Yes
Hash efa9a5b2b872d645b6d17d0da3a4bb14a63017990127439b2b3b34245815d61d
SimHash 4884ebd8c8a1

Groups

*

Rule Path Comment
Disallow /application/ -
Disallow /installer/ -
Disallow /lib/ -
Disallow /modules/ -
Disallow /system/ -
Disallow /themes/ -
Disallow /var/logs/ -
Disallow /var/modules/ -
Disallow /var/resizes/ -
Disallow /var/thumbs/ -
Disallow /var/tmp/ -
Disallow /var/uploads/ -
Disallow /digibug/print_photo/ -
Disallow /search с этой строки пошла редакция
Disallow /forum/thread*-1.html закрываем дубль первой страницы темы на форуме
Disallow /login -
Disallow /registration -
Disallow /go/ закрываем внешние ссылки
Disallow /templates закрываем от индексации шаблон, там много мусора ввиде картинок, файла со стилями, скриптов. если скрипты есть где еще - лучше тоже прикрыть.
Disallow /uploads закрываем файлы загруженные пользователями, можно и оставить открытыми.

Other Records

Field Value
sitemap http://boguchar-pamyat.ru/sitemap.xml

Warnings

  • `host` is not a known field.