ynet.one
robots.txt

Robots Exclusion Standard data for ynet.one

Resource Scan

Scan Details

Site Domain ynet.one
Base Domain ynet.one
Scan Status Ok
Last Scan2026-02-01T14:57:56+00:00
Next Scan 2026-03-03T14:57:56+00:00

Last Scan

Scanned2026-02-01T14:57:56+00:00
URL https://ynet.one/robots.txt
Domain IPs 141.8.193.99, 2a0a:2b42:9c:e7a3::
Response IP 141.8.193.99
Found Yes
Hash e0372f978a056ae2450284b6e12c0890c4ac90a08007471bd480e811eb8ffc4c
SimHash 4530906d8fb7

Groups

*

Product Comment
* Создаем секцию правил для роботов. * значит для всеÑ
Rule Path Comment
Disallow /cgi-bin Стандартная папка на Ñ
Disallow /wp-admin/ Закрываем админку.
Allow /wp-admin/admin-ajax.php Откроем аякс.
Disallow /? Все параметры запроса на главной.
Disallow *?s= Поиск.
Disallow *%26s%3D Поиск.
Disallow /search Поиск.
Disallow /author/ АрÑ
Disallow */embed$ Все встраивания.
Disallow */xmlrpc.php Файл WordPress API
Disallow *utm*%3D Ссылки с utm-метками
Disallow *openstat%3D Ссылки с метками openstat
Disallow /portfolio-category/prototype/ -
Disallow /dev -
Disallow /cases/ -

Other Records

Field Value
sitemap https://ynet.one/sitemap_index.xml

Comments

  • роботов. Чтобы указать секцию правил для отдельного
  • робота, вместо * укажите его имя: GoogleBot, Yandex.

Warnings

  • 2 invalid lines.