drvorobev.ru
robots.txt

Robots Exclusion Standard data for drvorobev.ru

Resource Scan

Scan Details

Site Domain drvorobev.ru
Base Domain drvorobev.ru
Scan Status Ok
Last Scan2026-02-05T20:01:43+00:00
Next Scan 2026-03-07T20:01:43+00:00

Last Scan

Scanned2026-02-05T20:01:43+00:00
URL https://drvorobev.ru/robots.txt
Domain IPs 87.236.16.240
Response IP 87.236.16.240
Found Yes
Hash 099c1e57f59f007cdfe1a866691a17bc1f3f92e420e0170c9104013986478d89
SimHash 29007645d20b

Groups

*

Rule Path Comment
Disallow /mobile_app/ -
Disallow /cgi-bin папка на Ñ
Disallow /bitrix/ папка с системными файлами битрикса
Disallow *bitrix_*%3D GET-запросы битрикса
Disallow /local/ папка с системными файлами битрикса
Disallow /*index.php$ дубли страниц index.php
Disallow /auth/ авторизация
Disallow *auth%3D авторизация
Disallow /personal/ личный кабинет
Disallow *register%3D регистрация
Disallow *forgot_password%3D забыли пароль
Disallow *change_password%3D изменить пароль
Disallow *login%3D логин
Disallow *logout%3D выÑ
Disallow */search/ поиск
Disallow /search/ -
Disallow /*/search/ -
Disallow *action%3D действия
Disallow *print%3D печать
Disallow *?new=Y новая страница
Disallow *?edit= редактирование
Disallow *?preview= предпросмотр
Disallow *backurl%3D трекбеки
Disallow *back_url%3D трекбеки
Disallow *back_url_admin%3D трекбеки
Disallow *captcha каптча
Disallow */feed все фиды
Disallow */rss rss фид
Disallow *svc_mobile%3D мобильный запрос
Disallow *?FILTER*= здесь и ниже различные популярные параметры фильтров
Disallow *?ei= -
Disallow *?p= -
Disallow *?q= -
Disallow *?&q= -
Disallow *?tags= -
Disallow *B_ORDER%3D -
Disallow *BRAND%3D -
Disallow *CLEAR_CACHE%3D -
Disallow *ELEMENT_ID%3D -
Disallow *price_from%3D -
Disallow *price_to%3D -
Disallow *PROPERTY_TYPE%3D -
Disallow *PROPERTY_WIDTH%3D -
Disallow *PROPERTY_HEIGHT%3D -
Disallow *PROPERTY_DIA%3D -
Disallow *PROPERTY_OPENING_COUNT%3D -
Disallow *PROPERTY_SELL_TYPE%3D -
Disallow *PROPERTY_MAIN_TYPE%3D -
Disallow *PROPERTY_PRICE%5B*%5D%3D -
Disallow *S_LAST%3D -
Disallow *SECTION_ID%3D -
Disallow *SECTION%5B*%5D%3D -
Disallow *SHOWALL%3D -
Disallow *SHOW_ALL%3D -
Disallow *SHOWBY%3D -
Disallow *SORT%3D -
Disallow *SPHRASE_ID%3D -
Disallow *TYPE%3D -
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Disallow *from%3D ссылки с метками from
Disallow /basket/ корзина
Disallow *?view= get
Disallow *?etext= get
Disallow *?tpclid= get
Disallow /*nav-* -
Disallow /bitrix/ -
Disallow /upload/ -
Disallow /local/ -
Disallow /compare/ -
Disallow /personal/ -
Disallow /rss/ -
Disallow /auth/ -
Disallow /login/ -
Disallow /webstat/ -
Disallow /desktop_app/ -
Disallow /ajax/ -
Disallow /test/ -
Disallow /404.php -
Disallow /*index*.php$ -
Disallow */index.php -
Disallow /search -
Disallow /*?q= -
Disallow /*?s= -
Disallow /*?section_id= -
Disallow /order/ -
Allow */upload/ открываем папку с файлами uploads
Allow /bitrix/*.js здесь и далее открываем для индексации скрипты
Allow /bitrix/*.css -
Allow /local/*.js -
Allow /local/*.css -
Allow /local/*.jpg -
Allow /local/*.jpeg -
Allow /local/*.png -
Allow /local/*.gif -

Other Records

Field Value
sitemap https://drvorobev.ru/sitemap.xml

Warnings

  • 2 invalid lines.
  • `clean-param` is not a known field.