ra.am
robots.txt

Robots Exclusion Standard data for ra.am

Resource Scan

Scan Details

Site Domain ra.am
Base Domain ra.am
Scan Status Ok
Last Scan2025-11-30T12:45:18+00:00
Next Scan 2025-12-30T12:45:18+00:00

Last Scan

Scanned2025-11-30T12:45:18+00:00
URL https://ra.am/robots.txt
Domain IPs 104.21.74.84, 172.67.156.103, 2606:4700:3030::ac43:9c67, 2606:4700:3037::6815:4a54
Response IP 104.21.74.84
Found Yes
Hash 8394d152b873b6090d0cca36c65c76916a68193367c5715b1d628184e58899d7
SimHash 1418d04b8431

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Disallow /cgi-bin папка на Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search/ поиск
Disallow /author/ арÑ
Disallow /users/ арÑ
Disallow */trackback трекбеки, уведомления в комментарияÑ
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads

Other Records

Field Value
sitemap http://ra.am/sitemap.xml
sitemap https://www.ra.am/sitemap-news.xml

Comments

  • т.к. для ниÑ
  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)

Warnings

  • 5 invalid lines.
  • `host` is not a known field.