belametais.com.br
robots.txt

Robots Exclusion Standard data for belametais.com.br

Resource Scan

Scan Details

Site Domain belametais.com.br
Base Domain belametais.com.br
Scan Status Ok
Last Scan2024-10-26T17:22:59+00:00
Next Scan 2024-11-25T17:22:59+00:00

Last Scan

Scanned2024-10-26T17:22:59+00:00
URL https://belametais.com.br/robots.txt
Redirect https://www.belametais.com.br/robots.txt
Redirect Domain www.belametais.com.br
Redirect Base belametais.com.br
Domain IPs 170.82.173.30, 170.82.174.30
Redirect IPs 170.82.173.30, 170.82.174.30
Response IP 170.82.174.30
Found Yes
Hash f63dbc6ae37303b8d8c66eb47d7893e28b1fc855b0e98c40e9207f2debc1e1fd
SimHash cc1ef401c70d

Groups

storebot-google
googlebot-image
facebookexternalhit

Rule Path
Allow /

googlebot

Rule Path
Allow /api/v2*
Disallow /checkout/
Disallow *order%3D*
Disallow *atributo%3D*
Disallow *ipp%3D*
Disallow *preco%3D*
Disallow *marca%3D*
Disallow *filtro%3D*

*

Rule Path
Disallow /

bytespider

Rule Path
Disallow /

bingbot

Rule Path
Disallow /

geedoproductsearch

Rule Path
Disallow /

yandexbot

Rule Path
Disallow /

semrushbot

Rule Path
Disallow /

orbbot

Rule Path
Disallow /

pageburst

Rule Path
Disallow /

Other Records

Field Value
sitemap https://www.belametais.com.br/xml/produtos.xml
sitemap https://www.belametais.com.br/xml/categorias.xml
sitemap https://www.belametais.com.br/xml/landing-pages.xml
sitemap https://www.belametais.com.br/xml/marcas.xml
sitemap https://www.belametais.com.br/xml/paginas-institucionais.xml
sitemap https://www.belametais.com.br/xml/listas-de-compras.xml
sitemap https://www.belametais.com.br/xml/imagens.xml

Comments

  • --- uappi robots.txt v3.3 ---
  • Liberar todas as URLs para os bots importantes
  • Regras para o Googlebot
  • ---- Ha casos em que a api pode ser bloqueada se estiver com parametro, entao mantenha esta regra abaixo para garantir a liberacao dela ----
  • --------- Negando URLs ---------
  • Negando URLs do checkout
  • ---- Negando parametros ----
  • Ordenacao
  • Filtro
  • Itens por pagina
  • Filtro de preco
  • Marca
  • Filtro generico
  • ---- Negando o acesso a todos os outros bots (alguns bots do Google ignoram as regras do user-agent: *) ----
  • Bloqueio bots ticket KJV-562280
  • --------- Sitemaps ---------