market-tire.ru
robots.txt
Robots Exclusion Standard data for market-tire.ru
Resource Scan
Scan Details
| Site Domain | market-tire.ru |
| Base Domain | market-tire.ru |
| Scan Status | Ok |
| Last Scan | 2025-03-20T03:53:18+00:00 |
| Next Scan | 2025-04-19T03:53:18+00:00 |
Last Scan
| Scanned | 2025-03-20T03:53:18+00:00 |
| URL | https://market-tire.ru/robots.txt |
| Domain IPs | 81.90.181.100 |
| Response IP | 81.90.181.100 |
| Found | Yes |
| Hash | f25cffb9f7391be326d63c1178886afbeccd2a17099db22743fc8e3b1b080d53 |
| SimHash | e90dd4450aa9 |
Groups
yandex
| Rule | Path | Comment |
|---|---|---|
| Disallow | /cgi-bin | - |
| Disallow | /assets/components/* | - |
| Disallow | /assets/minifyx/* | - |
| Disallow | /manager/* | - |
| Disallow | /mandemo1mir/* | - |
| Disallow | /assets/vendor/* | - |
| Disallow | /.well-known | - |
| Disallow | /core/* | - |
| Disallow | /connectors/* | - |
| Disallow | /conndemo1mir/* | - |
| Disallow | /index.php | - |
| Disallow | /?* | - |
| Disallow | /?page=support | - |
| Disallow | *?* | удаляем дубли для всех страниц (с параметрами) |
| Disallow | *openstat%3D | ссылки с метками openstat |
| Disallow | *from%3D | ссылки с метками from |
| Disallow | *utm*%3D | ссылки с utm-метками |
| Allow | /*.jpg | здесь и далее открываем для индексации изображения, скрипты и прочие файлы |
| Allow | /*.jpeg | - |
| Allow | /*.gif | - |
| Allow | /*.png | - |
| Allow | - | |
| Allow | /*.doc | - |
| Allow | /*.docx | - |
| Allow | /*.xls | - |
| Allow | /*.xlsx | - |
| Allow | /*.ppt | - |
| Allow | /*.pptx | - |
| Allow | /*.css | - |
| Allow | /*.js | - |
| Allow | *?page= | открываем для индексации страницы пагинации (и проверьте, чтобы для них был настроен canonical) |
google
| Rule | Path | Comment |
|---|---|---|
| Disallow | /cgi-bin | - |
| Disallow | /manager/ | - |
| Disallow | /mandemo1mir/ | - |
| Disallow | /assets/components/ | - |
| Disallow | /.well-known | - |
| Disallow | /core/ | - |
| Disallow | /connectors/ | - |
| Disallow | /conndemo1mir/ | - |
| Disallow | /index.php | - |
| Disallow | /?* | - |
| Disallow | /?page=support | - |
| Disallow | *?* | удаляем дубли для всех страниц (с параметрами) |
| Disallow | *openstat%3D | ссылки с метками openstat |
| Disallow | *from%3D | ссылки с метками from |
| Disallow | *utm*%3D | ссылки с utm-метками |
| Allow | /*.jpg | здесь и далее открываем для индексации изображения, скрипты и прочие файлы |
| Allow | /*.jpeg | - |
| Allow | /*.gif | - |
| Allow | /*.png | - |
| Allow | - | |
| Allow | /*.doc | - |
| Allow | /*.docx | - |
| Allow | /*.xls | - |
| Allow | /*.xlsx | - |
| Allow | /*.ppt | - |
| Allow | /*.pptx | - |
| Allow | /*.css | - |
| Allow | /*.js | - |
| Allow | *?page= | открываем для индексации страницы пагинации (и проверьте, чтобы для них был настроен canonical) |
Other Records
| Field | Value |
|---|---|
| crawl-delay | 10 |
Other Records
| Field | Value |
|---|---|
| sitemap | https://market-tire.ru/sitemap.xml |
Warnings
- `host` is not a known field.