sports4world.com
robots.txt

Robots Exclusion Standard data for sports4world.com

Resource Scan

Scan Details

Site Domain sports4world.com
Base Domain sports4world.com
Scan Status Ok
Last Scan2025-05-08T07:42:50+00:00
Next Scan 2025-05-15T07:42:50+00:00

Last Scan

Scanned2025-05-08T07:42:50+00:00
URL https://sports4world.com/robots.txt
Domain IPs 104.21.70.116, 172.67.223.96, 2606:4700:3030::6815:4674, 2606:4700:3036::ac43:df60
Response IP 104.21.70.116
Found Yes
Hash 02241393bc2aa6853f674093f4eefb1ffdf9dae207ed2b31014b61fc3edb388b
SimHash 2428c052a475

Groups

*

Product Comment
* общие правила для роботов, кроме Яндекса и Google,
Rule Path Comment
Disallow /cgi-bin папка на Ñ
Disallow /? все параметры запроса на главной
Disallow /wp- все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow /wp/ если есть подкаталог /wp/, где установлена CMS (если нет,
Disallow *?s= поиск
Disallow *%26s%3D поиск
Disallow /search/ поиск
Disallow /author/ арÑ
Disallow /users/ арÑ
Disallow */trackback трекбеки, уведомления в комментарияÑ
Disallow */feed все фиды
Disallow */rss rss фид
Disallow */embed все встраивания
Disallow */wlwmanifest.xml xml-файл манифеста Windows Live Writer (если не используете,
Disallow /xmlrpc.php файл WordPress API
Disallow *utm*%3D ссылки с utm-метками
Disallow *openstat%3D ссылки с метками openstat
Allow */uploads открываем папку с файлами uploads
Allow / -
Allow /wp-content/ -
Allow */uploads -
Allow /*/*.js -
Allow /*/*.css -
Allow /wp-*.png -
Allow /wp-*.jpg -
Allow /wp-*.jpeg -
Allow /wp-*.gif -
Allow /wp-*.svg -
Allow /wp-*.pdf -
Allow /wp-*.ttf -
Allow /wp-admin/admin-ajax.php -
Allow /wp-includes -

Other Records

Field Value
sitemap https://sports4world.com/sitemap_index.xml

Comments

  • т.к. для ниÑ
  • правило можно удалить)
  • ссылки на статью
  • правило можно удалить)
  • Укажите один или несколько файлов Sitemap (дублировать для каждого User-agent
  • не нужно). Google XML Sitemap создает 2 карты сайта, как в примере ниже.

Warnings

  • 5 invalid lines.