openbit.ru
robots.txt

Robots Exclusion Standard data for openbit.ru

Resource Scan

Scan Details

Site Domain openbit.ru
Base Domain openbit.ru
Scan Status Ok
Last Scan2025-11-18T11:00:27+00:00
Next Scan 2025-12-18T11:00:27+00:00

Last Scan

Scanned2025-11-18T11:00:27+00:00
URL https://openbit.ru/robots.txt
Domain IPs 195.208.1.102
Response IP 195.208.1.102
Found Yes
Hash 1b7502b9ff89c112163d235eeed62fc36eb096909a363e38942b16b21141698e
SimHash 216cede4e1d9

Groups

*

Product Comment
* К какому роботу обращаемся (по умолчанию ко всем)
Rule Path Comment
Disallow /administrator/ Запрет доступа к админ панели
Disallow /cache/ Запрет доступа к кешу
Disallow /components/ Запрет доступа к компонентам joomla
Disallow /includes/ Запрещает доступ к папке inclodes
Disallow /language/ Запрет доступа к языковым пакетам
Disallow /libraries/ Запрет доступа к библиотекам
Disallow /logs/ Запрет доступа к логам
Disallow /media/ Запрет доступа к папке медиа
Disallow /modules/ Запрет доступа к модулям
Disallow /plugins/ Запрет индексации плагинов
Disallow /templates/ Папка с вашими шаблонами
Disallow /tmp/ -
Disallow /xmlrpc/ -
Disallow /*com_mailto Запрет на индексацию формы отправки писем
Disallow /*pop%3D Запрет на индексацию всплывающиÑ
Disallow /*lang%3Dru Запрет на индексацию дополнительныÑ
Disallow /*format%3D -
Disallow /*print%3D Запрет индексации ссылки вывода на печать
Disallow /*task%3Dvote Голосования
Disallow /*%3Dwatermark Водяные знаки
Disallow /*%3Ddownload Ссылки на скачивание
Disallow /*user/ Профили пользователей
Disallow /404 Запрет индексации 404 ошибки
Disallow /index.php? -
Disallow /index.html -
Disallow /*? ссылки содержащие данный знак индексироваться не будут
Disallow /*% ссылки содержащие данный знак индексироваться не будут
Disallow /*%26 ссылки содержащие данный знак индексироваться не будут
Disallow /index2.php Запрет дублей
Disallow /index.php Запрет дублей
Disallow /*tag Запрет индексации облаков тегов
Disallow /*.pdf Если есть на сайте pdf файлы (на ваше усмотрение)
Disallow /*.swf Если есть на сайте swf файлы - flash (на ваше усмотрение)
Disallow /*print%3D1 Запрет индексации ссылки на печать
Disallow /*%3Datom Запрещаем RSS
Disallow /*%3Drss Запрещаем RSS
Disallow /*searchword -
Disallow /*start -

Warnings

  • 2 invalid lines.
  • `host` is not a known field.