meteonova.ru
robots.txt

Robots Exclusion Standard data for meteonova.ru

Resource Scan

Scan Details

Site Domain meteonova.ru
Base Domain meteonova.ru
Scan Status Ok
Last Scan2024-11-16T18:39:23+00:00
Next Scan 2024-11-23T18:39:23+00:00

Last Scan

Scanned2024-11-16T18:39:23+00:00
URL https://meteonova.ru/robots.txt
Domain IPs 93.174.129.242
Response IP 93.174.129.242
Found Yes
Hash fa23715c04609436484f0e9361818db95fe7e02c5e738454d68567f2bb22d88c
SimHash 5119084483b8

Groups

*

Rule Path
Disallow /rss
Disallow /xml
Disallow /ifrc
Disallow /frc/*?*
Disallow /guestbook/*
Disallow /flashinformer/*
Disallow /speech/*

Other Records

Field Value
crawl-delay 5

Other Records

Field Value
sitemap https://www.meteonova.ru/sitemap_weather.xml
sitemap https://www.meteonova.ru/sitemap_frc.xml
sitemap https://www.meteonova.ru/sitemap_pogoda.xml
sitemap https://www.meteonova.ru/sitemap_month.xml
sitemap https://www.meteonova.ru/sitemap_med.xml
sitemap https://www.meteonova.ru/sitemap_pro.xml
sitemap https://www.meteonova.ru/sitemap_auto.xml
sitemap https://www.meteonova.ru/sitemap_agro.xml
sitemap https://www.meteonova.ru/sitemap_avia.xml
sitemap https://www.meteonova.ru/sitemap_uv.xml
sitemap https://www.meteonova.ru/sitemap_gm.xml
sitemap https://www.meteonova.ru/sitemap_hourly.xml
sitemap https://www.meteonova.ru/sitemap_allergy.xml
sitemap https://www.meteonova.ru/sitemap_today.xml
sitemap https://www.meteonova.ru/sitemap_tomorrow.xml
sitemap https://www.meteonova.ru/sitemap_week.xml
sitemap https://www.meteonova.ru/sitemap_10.xml
sitemap https://www.meteonova.ru/sitemap_map.xml

Warnings

  • `host` is not a known field.