elite-d.ru
robots.txt
Robots Exclusion Standard data for elite-d.ru
Resource Scan
Scan Details
Site Domain | elite-d.ru |
Base Domain | elite-d.ru |
Scan Status | Ok |
Last Scan | 2024-09-15T00:56:54+00:00 |
Next Scan | 2024-10-15T00:56:54+00:00 |
Last Scan
Scanned | 2024-09-15T00:56:54+00:00 |
URL | http://elite-d.ru/robots.txt |
Redirect | http://www.elite-d.ru/robots.txt |
Redirect Domain | www.elite-d.ru |
Redirect Base | elite-d.ru |
Domain IPs | 2a00:15f8:a000:5:1:11:4:c385, 2a00:15f8:a000:5:1:12:4:c385, 2a00:15f8:a000:5:1:13:4:c385, 2a00:15f8:a000:5:1:14:4:c385, 90.156.201.102, 90.156.201.50, 90.156.201.94, 90.156.201.96 |
Redirect IPs | 2a00:15f8:a000:5:1:11:4:c385, 2a00:15f8:a000:5:1:12:4:c385, 2a00:15f8:a000:5:1:13:4:c385, 2a00:15f8:a000:5:1:14:4:c385, 90.156.201.102, 90.156.201.50, 90.156.201.94, 90.156.201.96 |
Response IP | 90.156.201.102 |
Found | Yes |
Hash | 6fcf3ac49fd9d0a30cc4c65197c7c8a3c94831f2d051e64e2974994dd640b148 |
SimHash | 630f051b4af4 |
Groups
*
Rule | Path | Comment |
---|---|---|
Allow | /images/stories/virtuemart/product | - |
Disallow | /administrator/ | - |
Disallow | /cache/ | - |
Disallow | /cli/ | - |
Disallow | /components/ | - |
Disallow | /images/ | - |
Disallow | /includes/ | - |
Disallow | /installation/ | - |
Disallow | /language/ | - |
Disallow | /libraries/ | - |
Disallow | /logs/ | - |
Disallow | /media/ | - |
Disallow | /modules/ | - |
Disallow | /plugins/ | - |
Disallow | /templates/ | - |
Disallow | /tmp/ | - |
Disallow | /zipimport | временная папка для загрузки фото в галерею |
Disallow | /*askquestion | - |
Disallow | /*pop%3D0 | Косяк sh404 |
Disallow | /*feed | Также запрещается RSS и atom |
Disallow | /*flypage%3D | Адреса страниц карточек из результатов поиска по сайту |
Disallow | /404 | - |
Disallow | /*cart | Корзина |
Disallow | /*keyword%3D | Поиск по ключевому слову на сайте |
Disallow | /*? | все ссылки которые содержат этот знак не индексируются ! |
Disallow | /*layout%3D | - |
Disallow | /*% | запрещает индексацию кириллических url |
Disallow | /*mdf0 | запрещает индексацию старых линков на панели |
Disallow | /*rez0 | запрещает индексацию старых линков на резьбу |
Disallow | /*cl0 | запрещает индексацию старых линков на лавку |
Disallow | /*view-album | запрещает индексацию старых линков на категории галереи |
Disallow | /*view-photo | запрещает индексацию старых линков на фото в галереи |
Other Records
Field | Value | Comment |
---|---|---|
crawl-delay | 3 | задает таймаут в 3 секунды |
Other Records
Field | Value |
---|---|
sitemap | http://www.elite-d.ru/sitemap.xml |
Warnings
- `host` is not a known field.
Comments