Log In Sign Up

antai.space
robots.txt

Robots Exclusion Standard data for antai.space

Resource Scan

Scan Details

Site Domain antai.space
Base Domain antai.space
Scan Status Ok
Last Scan2026-01-16T14:29:37+00:00
Next Scan 2026-02-15T14:29:37+00:00

Last Scan

Scanned2026-01-16T14:29:37+00:00
URL https://antai.space/robots.txt
Domain IPs 2a00:f940:2:2:1:3:0:256, 31.31.196.55
Response IP 31.31.196.55
Found Yes
Hash 8d72bd42f0f03f2b889c8d473ff6d76e920fc963469727826d3d454b61c261c3
SimHash 20155641d050

Groups

googlebot

Rule Path
Allow /
Allow /index.php
Allow /zadachi/
Allow /zadachi/index.php
Allow /zadachi/pages/
Disallow /index.html
Disallow /api/
Disallow /admin/
Disallow /getbalance.php
Disallow /register.php
Disallow /pay*.php
Disallow /*.json$
Disallow /*.log$

Other Records

Field Value
crawl-delay 1

googlebot-image

Rule Path
Allow /zadachi/images/
Allow /*.jpg$
Allow /*.jpeg$
Allow /*.png$
Allow /*.gif$
Allow /*.webp$
Allow /*.svg$

yandex

Rule Path
Allow /
Allow /index.php
Allow /zadachi/
Allow /zadachi/index.php
Allow /zadachi/pages/
Disallow /index.html
Disallow /api/
Disallow /admin/
Disallow /getbalance.php
Disallow /register.php
Disallow /pay*.php
Disallow /*.json$
Disallow /*.log$

Other Records

Field Value
crawl-delay 2

yandeximages

Rule Path
Allow /zadachi/images/
Allow /*.jpg$
Allow /*.jpeg$
Allow /*.png$
Allow /*.gif$
Allow /*.webp$

yandexmedia

Rule Path
Allow /zadachi/images/

yandexdirect

Rule Path
Disallow /

yandexmetrika

Rule Path
Allow /

bingbot

Rule Path
Allow /
Allow /index.php
Allow /zadachi/
Disallow /index.html
Disallow /api/
Disallow /admin/
Disallow /*.json$

Other Records

Field Value
crawl-delay 1

msnbot

Rule Path
Allow /
Disallow /index.html
Disallow /api/
Disallow /admin/

mail.ru_bot

Rule Path
Allow /
Allow /index.php
Allow /zadachi/
Disallow /index.html
Disallow /api/
Disallow /admin/

Other Records

Field Value
crawl-delay 2

duckduckbot

Rule Path
Allow /
Allow /index.php
Disallow /index.html
Disallow /api/
Disallow /admin/

slurp

Rule Path
Allow /
Disallow /index.html
Disallow /api/

baiduspider

Rule Path
Allow /
Disallow /index.html
Disallow /api/

Other Records

Field Value
crawl-delay 5

*

Rule Path
Allow /
Allow /index.php
Allow /pay2.html
Allow /zadachi/
Allow /zadachi/index.php
Allow /zadachi/pages/
Disallow /index.html
Allow /favicon.ico
Allow /favicon.svg
Allow /favicon-96x96.png
Allow /apple-touch-icon.png
Allow /og-image.jpg
Allow /logo.png
Allow /u100.png
Allow /site.webmanifest
Allow /*.css$
Allow /*.js$
Allow /zadachi/images/
Disallow /simrider/
Disallow /api/
Disallow /admin/
Disallow /cgi-bin/
Disallow /tmp/
Disallow /cache/
Disallow /logs/
Disallow /backup/
Disallow /test/
Disallow /dev/
Disallow /includes/
Disallow /config/
Disallow /311024/
Disallow /bot/
Disallow /caloria/
Disallow /cc/
Disallow /copy/
Disallow /cordova-js-src/
Disallow /cpa/
Disallow /cyf/
Disallow /new/
Disallow /oz/
Disallow /plantai/
Disallow /plugins/
Disallow /po/
Disallow /ragdoll/
Disallow /runguys/
Disallow /style/
Disallow /tap%5BDELETED%5D/
Disallow /telegram-bot-sdk/
Disallow /getbalance.php
Disallow /register.php
Disallow /pay.php
Disallow /pay2.php
Disallow /callback.php
Disallow /webhook.php
Disallow /cron.php
Disallow /*.json$
Disallow /*.log$
Disallow /*.sql$
Disallow /*.zip$
Disallow /*.tar$
Disallow /*.gz$
Disallow /*.bak$
Disallow /.htaccess
Disallow /.htpasswd
Disallow /.git/
Disallow /.env
Disallow /composer.json
Disallow /composer.lock
Disallow /package.json
Disallow /package-lock.json
Disallow /*?sid=
Disallow /*?session=
Disallow /*?token=
Disallow /*?PHPSESSID=
Disallow /*?ref=
Disallow /*?click_id=
Allow /zadachi/?subject=
Allow /zadachi/index.php?subject=
Allow /zadachi/?page=
Allow /zadachi/*?page=

ahrefsbot

Rule Path
Disallow /

semrushbot

Rule Path
Disallow /

mj12bot

Rule Path
Disallow /

dotbot

Rule Path
Disallow /

blexbot

Rule Path
Disallow /

searchmetricsbot

Rule Path
Disallow /

seokicks-robot

Rule Path
Disallow /

sistrix

Rule Path
Disallow /

screaming frog seo spider

Rule Path
Disallow /

ahrefssiteaudit

Rule Path
Disallow /

petalbot

Rule Path
Disallow /

megaindex.ru

Rule Path
Disallow /

bomborabot

Rule Path
Disallow /

bytespider

Rule Path
Disallow /

dataforseobot

Rule Path
Disallow /

gptbot

Rule Path
Disallow /

ccbot

Rule Path
Disallow /

anthropic-ai

Rule Path
Disallow /

claude-web

Rule Path
Disallow /

facebookbot

Rule Path
Allow /

twitterbot

Rule Path
Allow /

linkedinbot

Rule Path
Allow /

telegrambot

Rule Path
Allow /

whatsapp

Rule Path
Allow /

slackbot

Rule Path
Allow /
Back to top

Other Records

Field Value
sitemap https://antai.space/sitemap.xml
sitemap https://antai.space/zadachi/sitemap.xml
Back to top

Comments

  • ═══════════════════════════════════════════════════════════════════════════
  • ROBOTS.TXT для AntAI (antai.space)
  • Оптимизирован для SEO
  • Главная страница: index.php
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • GOOGLE
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • YANDEX
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • BING & MAIL.RU
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • ДРУГИЕ ПОИСКОВИКИ
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • ВСЕ ОСТАЛЬНЫЕ РОБОТЫ
  • ═══════════════════════════════════════════════════════════════════════════
  • Главные страницы
  • Запретить index.html в корне (главная это index.php)
  • Ресурсы - разрешить
  • Изображения задач
  • Технические директории - запретить
  • PHP-скрипты (кроме index.php)
  • Служебные файлы
  • Параметры сессий и трекинга
  • Разрешить полезные параметры фильтрации
  • ═══════════════════════════════════════════════════════════════════════════
  • БЛОКИРОВКА ВРЕДОНОСНЫХ БОТОВ
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • SITEMAP
  • ═══════════════════════════════════════════════════════════════════════════
  • ═══════════════════════════════════════════════════════════════════════════
  • HOST (для Яндекса - указывает основное зеркало)
  • ═══════════════════════════════════════════════════════════════════════════
Back to top

Warnings

  • `clean-param` is not a known field.
  • `host` is not a known field.
Back to top