uabooks.fun
robots.txt

Robots Exclusion Standard data for uabooks.fun

Resource Scan

Scan Details

Site Domain uabooks.fun
Base Domain uabooks.fun
Scan Status Failed
Failure StageFetching resource.
Failure ReasonCouldn't connect to server.
Last Scan2026-03-12T04:35:48+00:00
Next Scan 2026-06-10T04:35:48+00:00

Last Successful Scan

Scanned2023-08-01T21:39:27+00:00
URL https://uabooks.fun/robots.txt
Redirect https://www.uabooks.ru/robots.txt
Redirect Domain www.uabooks.ru
Redirect Base uabooks.ru
Domain IPs 109.94.209.211
Redirect IPs 109.94.209.211
Response IP 109.94.209.211
Found Yes
Hash 40a3e79f83c76c1d28b740b466592cf28310e7078df0b5fa653bc8915ee9f837
SimHash 3428d143a535

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Disallow /cgi-bin папка на Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search/ поиск
Disallow /author/ арÑ
Disallow /users/ арÑ
Disallow */trackback трекбеки, уведомления в комментарияÑ
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Disallow /?download= ссылки на скачивание KamaClickCounter
Disallow /ebook каталог epub страниц
Disallow /random/ случайная страница
Allow */uploads открываем папку с файлами uploads

googlebot

Product Comment
googlebot правила для Google (комментарии не дублирую)
Rule Path Comment
Disallow /cgi-bin -
Disallow /? -
Disallow /wp- -
Disallow /wp/ -
Disallow *?s= -
Disallow *%26s%3D -
Disallow /search/ -
Disallow /author/ -
Disallow /users/ -
Disallow */trackback -
Disallow */feed -
Disallow */rss -
Disallow */embed -
Disallow */wlwmanifest.xml -
Disallow /xmlrpc.php -
Disallow *utm*%3D -
Disallow *openstat%3D -
Disallow /?download= ссылки на скачивание KamaClickCounter
Disallow /ebook каталог epub страниц
Disallow /random/ случайная страница
Allow */uploads -
Allow /*/*.js открываем js-скрипты внутри /wp- (/*/ - для приоритета)
Allow /*/*.css открываем css-файлы внутри /wp- (/*/ - для приоритета)
Allow /wp-*.png картинки в плагинаÑ
Allow /wp-*.jpg картинки в плагинаÑ
Allow /wp-*.jpeg картинки в плагинаÑ
Allow /wp-*.gif картинки в плагинаÑ
Allow /wp-admin/admin-ajax.php используется плагинами, чтобы не блокировать JS и CSS

yandex

Product Comment
yandex правила для Яндекса (комментарии не дублирую)
Rule Path Comment
Disallow /cgi-bin -
Disallow /? -
Disallow /wp- -
Disallow /wp/ -
Disallow *?s= -
Disallow *%26s%3D -
Disallow /search/ -
Disallow /author/ -
Disallow /users/ -
Disallow */trackback -
Disallow */feed -
Disallow */rss -
Disallow */embed -
Disallow */wlwmanifest.xml -
Disallow /xmlrpc.php -
Disallow /?download= ссылки на скачивание KamaClickCounter
Disallow /ebook каталог epub страниц
Disallow /random/ случайная страница
Allow */uploads -
Allow /*/*.js -
Allow /*/*.css -
Allow /wp-*.png -
Allow /wp-*.jpg -
Allow /wp-*.jpeg -
Allow /wp-*.gif -
Allow /wp-admin/admin-ajax.php -

Other Records

Field Value
sitemap https://uabooks.ru/post-sitemap.xml
sitemap https://uabooks.ru/page-sitemap.xml
sitemap https://uabooks.ru/sitemap_index.xml

Comments

  • т.к. для ниÑ
  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)
  • Яндекс рекомендует не закрывать
  • от индексирования, а удалять параметры меток,
  • Google такие правила не поддерживает
  • аналогично
  • Укажите один или несколько файлов Sitemap (дублировать для каждого User-agent
  • не нужно). Google XML Sitemap создает 2 карты сайта, как в примере ниже.
  • Укажите главное зеркало сайта, как в примере ниже (с WWW / без WWW, если HTTPS
  • то пишем протокол, если нужно указать порт, указываем). Команду Host понимает
  • Яндекс и Mail.RU, Google не учитывает.

Warnings

  • 9 invalid lines.
  • `host` is not a known field.