vstp.ru
robots.txt

Robots Exclusion Standard data for vstp.ru

Resource Scan

Scan Details

Site Domain vstp.ru
Base Domain vstp.ru
Scan Status Ok
Last Scan2026-01-04T22:53:10+00:00
Next Scan 2026-02-03T22:53:10+00:00

Last Scan

Scanned2026-01-04T22:53:10+00:00
URL https://vstp.ru/robots.txt
Redirect https://www.vstp.ru/robots.txt
Redirect Domain www.vstp.ru
Redirect Base vstp.ru
Domain IPs 31.31.198.44
Redirect IPs 31.31.198.44
Response IP 31.31.198.44
Found Yes
Hash 0ab108715fb03de72f703d9816333bf42279352a99b6319aa640756f5ceb7bf5
SimHash 4715e5d3c7dd

Groups

bingbot

No rules defined. All paths allowed.

Other Records

Field Value Comment
crawl-delay 40 задает таймаут в 40 секунд только для bingbot

petalbot

No rules defined. All paths allowed.

Other Records

Field Value Comment
crawl-delay 40 задает таймаут в 40 секунд только для bingbot

serpstatbot

No rules defined. All paths allowed.

Other Records

Field Value Comment
crawl-delay 40 задает таймаут в 40 секунд только для bingbot