btekt.com
robots.txt
Robots Exclusion Standard data for btekt.com
Resource Scan
Scan Details
| Site Domain | btekt.com |
| Base Domain | btekt.com |
| Scan Status | Ok |
| Last Scan | 2025-05-26T08:06:29+00:00 |
| Next Scan | 2025-06-25T08:06:29+00:00 |
Last Scan
| Scanned | 2025-05-26T08:06:29+00:00 |
| URL | https://btekt.com/robots.txt |
| Domain IPs | 2a03:6f00:6:1::57f9:2b81, 87.249.43.129 |
| Response IP | 87.249.43.129 |
| Found | Yes |
| Hash | 78291ddf345d4d537bf7a554108521c6b9ed1bdf27a8121c71efd1f816512f68 |
| SimHash | 6d4c83b40e23 |
Groups
*
| Rule | Path | Comment |
|---|---|---|
| Disallow | */cgi-bin | Стандартная папка на хостинге. |
| Disallow | */wp-admin/ | Закрываем админку. |
| Disallow | */? | Все параметры запроса на главной. |
| Disallow | *?s= | Поиск. |
| Disallow | *%26s%3D | Поиск. |
| Disallow | /search | Поиск. |
| Disallow | */author/ | Архив автора. |
| Disallow | */embed | Все встраивания. |
| Disallow | */wp-json/ | - |
| Disallow | */page/ | Все виды пагинации. |
| Disallow | */xmlrpc.php | Файл WordPress API |
| Disallow | *utm*%3D | Ссылки с utm-метками |
| Disallow | *openstat%3D | Ссылки с метками openstat # роботов. Чтобы указать секцию правил для отдельного |
| Disallow | *?add_to_wishlist= | - |
| Disallow | */?max | - |
| Disallow | */?min | - |
| Disallow | */feed/ | - |
| Allow | /robots.txt | - |
Other Records
| Field | Value |
|---|---|
| sitemap | https://btekt.com/sitemap_index.xml |
Warnings
- `host` is not a known field.