Log In Sign Up

bizhint.net
robots.txt

Robots Exclusion Standard data for bizhint.net

Resource Scan

Scan Details

Site Domain bizhint.net
Base Domain bizhint.net
Scan Status Ok
Last Scan2024-09-23T10:01:52+00:00
Next Scan 2024-09-30T10:01:52+00:00

Last Scan

Scanned2024-09-23T10:01:52+00:00
URL https://bizhint.net/robots.txt
Domain IPs 89.184.88.185
Response IP 89.184.88.185
Found Yes
Hash 3a94ba2d2e584f03a6a91c7fc29c6a1cf7d282dc9c46d1a13acc1c055054524a
SimHash e220d973e631

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Allow */uploads открываем папку с файлами uploads
Disallow /cgi-bin системная папка на Ñ
Disallow *?s= запрос поиска
Disallow *%26s%3D запрос поиска
Disallow /search/ запрос поиска
Disallow /author/ арÑ
Disallow /users/ арÑ
Disallow */trackback трекбеки, уведомления в комментарияÑ
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Back to top

Other Records

Field Value
sitemap https://bizhint.net/sitemap.xml
sitemap https://bizhint.net/sitemap.xml.gz
Back to top

Comments

  • т.к. для ниÑ
  • арÑ
  • ссылки на статью
  • правило можно удалить)
  • Укажите один или несколько файлов Sitemap (дублировать для каждого User-agent
  • не нужно). Google XML Sitemap создает 2 карты сайта, как в примере ниже.
  • Host прописывать больше не нужно.
Back to top

Warnings

  • 6 invalid lines.
Back to top