elite-d.ru
robots.txt

Robots Exclusion Standard data for elite-d.ru

Resource Scan

Scan Details

Site Domain elite-d.ru
Base Domain elite-d.ru
Scan Status Ok
Last Scan2024-09-15T00:56:54+00:00
Next Scan 2024-10-15T00:56:54+00:00

Last Scan

Scanned2024-09-15T00:56:54+00:00
URL http://elite-d.ru/robots.txt
Redirect http://www.elite-d.ru/robots.txt
Redirect Domain www.elite-d.ru
Redirect Base elite-d.ru
Domain IPs 2a00:15f8:a000:5:1:11:4:c385, 2a00:15f8:a000:5:1:12:4:c385, 2a00:15f8:a000:5:1:13:4:c385, 2a00:15f8:a000:5:1:14:4:c385, 90.156.201.102, 90.156.201.50, 90.156.201.94, 90.156.201.96
Redirect IPs 2a00:15f8:a000:5:1:11:4:c385, 2a00:15f8:a000:5:1:12:4:c385, 2a00:15f8:a000:5:1:13:4:c385, 2a00:15f8:a000:5:1:14:4:c385, 90.156.201.102, 90.156.201.50, 90.156.201.94, 90.156.201.96
Response IP 90.156.201.102
Found Yes
Hash 6fcf3ac49fd9d0a30cc4c65197c7c8a3c94831f2d051e64e2974994dd640b148
SimHash 630f051b4af4

Groups

*

Rule Path Comment
Allow /images/stories/virtuemart/product -
Disallow /administrator/ -
Disallow /cache/ -
Disallow /cli/ -
Disallow /components/ -
Disallow /images/ -
Disallow /includes/ -
Disallow /installation/ -
Disallow /language/ -
Disallow /libraries/ -
Disallow /logs/ -
Disallow /media/ -
Disallow /modules/ -
Disallow /plugins/ -
Disallow /templates/ -
Disallow /tmp/ -
Disallow /zipimport временная папка для загрузки фото в галерею
Disallow /*askquestion -
Disallow /*pop%3D0 Косяк sh404
Disallow /*feed Также запрещается RSS и atom
Disallow /*flypage%3D Адреса страниц карточек из результатов поиска по сайту
Disallow /404 -
Disallow /*cart Корзина
Disallow /*keyword%3D Поиск по ключевому слову на сайте
Disallow /*? все ссылки которые содержат этот знак не индексируются !
Disallow /*layout%3D -
Disallow /*% запрещает индексацию кириллических url
Disallow /*mdf0 запрещает индексацию старых линков на панели
Disallow /*rez0 запрещает индексацию старых линков на резьбу
Disallow /*cl0 запрещает индексацию старых линков на лавку
Disallow /*view-album запрещает индексацию старых линков на категории галереи
Disallow /*view-photo запрещает индексацию старых линков на фото в галереи

Other Records

Field Value Comment
crawl-delay 3 задает таймаут в 3 секунды

Other Records

Field Value
sitemap http://www.elite-d.ru/sitemap.xml

Comments

  • If the Joomla site is installed within a folder such as at
  • e.g. www.example.com/joomla/ the robots.txt file MUST be
  • moved to the site root at e.g. www.example.com/robots.txt
  • AND the joomla folder name MUST be prefixed to the disallowed
  • path, e.g. the Disallow rule for the /administrator/ folder
  • MUST be changed to read Disallow: /joomla/administrator/
  • For more information about the robots.txt standard, see:
  • http://www.robotstxt.org/orig.html
  • For syntax checking, see:
  • http://www.sxw.org.uk/computing/robots/check.html

Warnings

  • `host` is not a known field.